Рубрика «хранилища данных» - 36

На хабре уже немало рассказано про фильтр Блума. Напомню, что это структура данных, которая позволяет проверить принадлежность элемента ко множеству, не храня при этом сам элемент. Существует вероятность ложно-положительного ответа, но отрицательный ответ всегда достоверен. В фильтре с точностью 1% требуется всего лишь несколько бит на элемент.

Эта структура часто применяется для ограничения числа запросов к хранилищу данных, отсекая обращения за элементами, которых там заведомо нет. Кроме того, её можно применять для примерного подсчёта числа уникальных событий, пользователей, просмотров и т.д. Больше примеров интересных применений.

Однако есть трудности, которые могут сдерживать веб-разработчиков от применения фильтра Блума.
Читать полностью »

Многие люди думают, что дата центр — это просто помещение с серверами. Девяносто процентов всей информации, которая накапливалась на протяжении последних десятилетий, а также передавалась друг другу через глобальную сеть Интернет, все это стало реальностью благодаря ЦОД. Все больше и больше компаний, предприятий, простых пользователей и правительств по всему миру зависит от компьютерных систем, программного обеспечения и сетей, которые в свою очередь зависят от дата центров. Инфраструктура способствует компаниям в управлении бизнесом, чиновникам — в управлении страной и простым людям для обмена информацией и не только.

Модульные дата центры из «поднебесной» и Азии - 1Читать полностью »

В проектировании и последующем создании дата-центров, их операторы учитывают самые различные факторы: непосредственное время, необходимое для строительства помещений, коэффициент эффективности использования электроэнергии (Power Usage Effectiveness; PUE), наиболее оптимальное месторасположение ЦОД, его транспортную доступность, соответствующие всем нормам условия работы для персонала и т.д… Но существуют концепции, с помощью которых можно немного ускорить весь этот процесс. Ниже описаны три подхода к возведению ЦОД, которые учитывают разнообразные потребности бизнеса и конечных пользователей инфраструктуры дата-центров.

Три подхода к созданию ЦОД от Louros Project, Keystone NAP и Iron Mountain - 1

Читать полностью »

ONTAP Select это логическое развитие линейки Data ONTAP-v

Как и предшественник, этот продукт живёт и полностью опирается на традиционный RAID контроллер, установленный в вашем сервере. Также отсутствует поддержка FCP. Поддерживаются NAS (CIFS, NFS) и IP SAN (iSCSI) протоколы.

Из ожидаемых новшеств:

  • Поддержка High Avalability
  • Поддержка кластеризации до 4 нод
  • Максимальный полезный объем 400 ТБ (по 100ТБ на ноду в 4х нодовом кластере)

На ряду с High Avalability и кластеризацией по-прежнему поддерживаются однонодовые конфигурации.
SDS от NetApp: ONTAP Select - 1
Читать полностью »

Технологический процесс стремительно развивается, создаются новые технологии и усовершенствуются разработки. Тем ни менее для большинства операторов и владельцев ЦОД до сих пор остается актуальной проблема выбора наиболее подходящей системы охлаждения дата-центров. На оптимизацию температурного режима серверов расходуется слишком много электричества (вплоть до 40-50 процентов от общего энергопотребления ЦОД). В то же время немалых денег стоит и повышение эффективность систем охлаждения серверных ферм. И поэтому компании постоянно бьются над решением данной задачи. Системы и стратегии охлаждения также с каждым разом совершенствуются. Это происходит как благодаря состоятельным владельцам дата-центров, вроде корпорации Microsoft (инженеры компании подумывают о том, чтобы разместить автономный дата-центр на дне Тихого океана), так и благодаря отдельным вендорам, которые тратят часть своей прибыли на исследования и разработки данной отрасли. С общими усилиями рынок систем охлаждения ЦОД движется вперед.

Ниже описаны рекомендации и новости по-поводу охлаждения дата-центров от компаний: Bluon Energy, Emerson, Star Refrigeration, Asetek и CoolIT Systems.

Охлаждение ЦОД: опыт Bluon Energy, Emerson, Star Refrigeration, Asetek и CoolIT Systems - 1

Читать полностью »

Как на счет того, чтобы для охлаждения серверов в жару использовать сточные воды? Знаем, умеем, практикуем — компания Apple недавно заявила о своем намерении проспонсировать строительство обьекта по очистке сточных вод в городе Праймвилль (штат Орегон, США). В этом городке уже есть дата-центр компании, согласно информационному агенству Oreon Live, он считается самым крупным потребителем воды в этом регионе.

Сточные воды как охладитель - 1

Идея постройки уникальных систем водоочистки рядом с ЦОД не новая. Многие компании уже спроектировали и построили такие системы, с помощью таких систем можно использовать переработанную канализационную воду для охлаждения серверных ферм с помощью этой же воды. Все это экономит деньги компаний на счетах за электроенергию, при этом еще и снижает негативное влияние инфраструктуры дата-центра на окружающую среду. Читать полностью »

В последнее время искусственная, или виртуальная, реальность (VR) все более распространяется в сфере потребительской электроники, а также в обрабатывающей промышленности, здравоохранении, образовании и т.д. Но в индустрии ЦОД данное направление практически не применяется, не взирая на то, что именно серверы отвечают за визуализацию контента, отображаемого большинством гарнитур виртуальной реальности.

Виртуальная реальность в проектировании дата центров - 1

Читать полностью »

Представляю Вашему вниманию уникальный дата центр Finger Lakes Technologies Group (FLTG), который находится внутри хранилища ядерных боеголовок. Американская компания FLTG является хостинг-провайдером и поставщиком услуг по размещению клиентского оборудования в машинных залах коммерческого ЦОД (данную услугу называют колокейшн). Это один из немногих провайдеров по всему миру и в США, который в силах гарантировать сохранность ценных данных и оборудования для своих клиентов (даже при ядерном взрыве).

Уникальный ЦОД Finger Lakes Technologies Group внутри ядерного хранилища - 1

Серверная ферма расположилась в северной части штата Нью-Йорк, где находятся сотни петабайт клиентских данных и тысячи физических серверов. Оборудование компании размещается в 64 помещениях, которые в прошлом использовали для надземного хранения ядерных боеголовок США. Толщина стен, отделяющая внешний мир от серверного оборудования, местами достигает метровой толщины из стали и бетона. За последние 10 лет компания Finger Lakes Technologies Group постепенно стала владельцем части хранилища, использовавшегося для хранения боеприпасов во времена холодной войны. База была построена еще в 1941 году и в последствии продана компании Seneca County Industrial Development Agency (перешла в ее собственность в 2000 году). Территория базы имеет общую площадь в 4.3 тис гектаров, большую часть из которой контролирует колокейшн-провайдер.

Читать полностью »

Компания NetApp впервые в мире реализовала и запатентовала технологию снепшотирования в 1993 г. С тех пор технология естественным образом развивалась и отлаживалась. Спустя 23 года можно с полной уверенностью сказать, что снепшотирование NetApp отлично работает, не влияя на производительность, независимо от протокола: блочного или файлового. С приходом Flash технологий ИТ индустрия обратила свой взор на использование снепшотов и тонкого клонирования из-за того, что Flash пока что – дорогая технология, и её ресурсы необходимо экономить. Компания NetApp долгие годы единолично вырабатывала и несла на своих плечах парадигму резервного копирования, построенную на сшепшотах, где снепшоты были не временной необходимостью, а основой всей этой идеи, и наконец-то получила признание того, что это эффективный и правильный подход для резервного копирования и разработки. А с появлением Thing Propositioning и UNMAP снепшоты стало действительно удобно использовать и хранить как резервные копии прямо на основную, продуктивную СХД, что позволяет крайне быстро восстанавливать данные после логической ошибки. А для резервирования и защиты от выхода из строя основной СХД использовать технологии репликации данных, основанные на снепшотах, чтобы реплицировать только изменения, а не полный набор данных.
NetApp ONTAP c Veeam Backup & Replication - 1
Читать полностью »

Компании всячески стремятся повысить энергоэффективность инфраструктуры центров обработки данных. Для этого инженеры и операторы ЦОД используют всевозможные средства, разрабатывают и внедряют инновационные технологии. Одни компании открыто делятся своими достижениями в данной области, другие же держат в тайне проекты по улучшению инфраструктуры серверных фермы. Но существует категория компаний, которые не имеют собственных дата центров и зарабатывают на том, что продают технологические наработки и изобретения клиентам или владельцам ЦОД. В посте пойдет речь о предложенных вариантах решений таких компаний в сфере повышения энергоэффективности дата центров.

Варианты повышения энергоэффективности от Coolan, MacroAir, AMCA International и Cradle - 1

Читать полностью »


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js