Рубрика «хранение данных»

За окном ноябрь, а это значит, что до новогодних каникул осталось всего ничего! Для Western Digital уходящий год выдался не самым простым, хотя и весьма продуктивным. Подготовка к производству винчестеров, использующих передовую технологию магнитной записи MAMR, перепрофилирование производства SSD с планарных чипов на трехмерные, запуск новых продуктов, а теперь еще и ребрендинг! Нет-нет, не пугайтесь: мы не собираемся расставаться с названием Western Digital. Напротив: отныне легендарный (что уж тут скромничать) бренд будет включать в себя огромное количество продуктов, в том числе — выпускаемых ранее под марками дочерних предприятий. И специально для того, чтобы вы не запутались, мы и подготовили сегодняшний материал.Читать полностью »

И хотя людей, которые для написания списка покупок или компиляции данных по квартплате используют скрипты на python, пересчитать по головам, но если так получилось, что вы используете скрипты для решения рутинных задач и иногда скрипты работают недопустимо долго, то возможно, идея применение ленивых вычислений ко всему что движется, придётся вам по вкусу.

Читать полностью »

Конференция ПРОSTOR 2018: вопросы и ответы про будущее СХД - 1

Каждую осень команда «Рэйдикс» собирает неравнодушных к технологиям хранения данных на ежегодной конференции ПРОSTOR. В предыдущей статье мы рассказывали, как это было раньше, и вот пришла пора подвести итоги 4-ой конференции, которая состоялась 1-го ноября на «Красном Октябре».
Читать полностью »

Иногда может захотеться странного. Вот вроде бы лежит себе видеокамера стандарта MiniDV и лежит. Есть не просит. А что если взять и записать на её кассеты вовсе даже не видео, а, скажем, файлы. Запись-то всё равно цифровая. Пусть объём кассеты всего лишь около 13 ГБ (под данные получилось занять около 9.5 ГБ), пусть скорость чтения 3.5 МБ в секунду, но ведь получится простой домашний стример. Так сказать, “стример для бедных”. Почему бы не отправить на несколько кассет, скажем, какие-либо важные файлы. Просто так, на всякий случай. Попробуем!
Читать полностью »

Есть сеть примерно из 90 очень крупных магазинов по России. Каждый магазин бэкапится на ленточную библиотеку (ниже на фото — ЗИП). Дальше они берут кассеты и везут их на машине в архив.

Резервное копирование на кассеты - 1

Устройства механические: они ломаются, выходят из строя, мы ездим чинить. Потом они сходят с расширенной гарантии, и это всех бесит.

В какой-то момент они устарели. Но бюджета было ровно на новую версию ленточной библиотеки. В этот момент заказчик появился у нас на пороге с энной суммой и спросил, можно ли что-то придумать в её рамках.

Мы было подумали про центральную инсталляцию одной большой железки, но ситуация осложнялась тем, что каналы от магазинов ограничены 5 Мбит/с (от самых дальних).
Читать полностью »

К 2025 году общемировой объем сохраненных данных достигнет 163 зеттабайт — к такому выводу пришли аналитики консалтинговой компании International Data Corporation (IDC) в своем докладе “The Data Age 2025”. Для сравнения, в 2016 году эта цифра составляла всего 16 зеттабайт — таким образом, мы получим практически десятикратный прирост объема сохраненной информации.

Виноваты в этом отнюдь не видео в формате 4K и не компьютерные игры весом от 100 ГБ и выше: столь бурный рост связан с повышенным интересом к Big Data со стороны бизнеса. Стремясь предсказать поведение потенциальных клиентов и лучше понять целевую аудиторию, крупные корпорации фиксируют буквально каждое действие, совершаемое человеком в глобальной паутине. Ситуацию усугубляют и такие перспективные направления, как машинное обучение и интернет вещей: миллиарды устройств ежесекундно генерируют огромное количество информации, а нейросети требуют все больше сведений для анализа и обработки.

Перечисленные факторы определяют спрос на более вместительные накопители, но реально ли в принципе удовлетворить потребности современного рынка? Мы утверждаем — да, с появлением MAMR нет ничего невозможного! Специально для тех, у кого нет времени на чтение объемных материалов, мы подготовили короткий видеоролик, освещающий основные преимущества накопителей, выполненных по технологии MAMR.

Если же вы хотите узнать “грязные подробности”, добро пожаловать под кат!Читать полностью »

Сегодня я расскажу о гиперконвергентной платформе SharxBase. На Хабре еще не было обзора этого комплекса, и с этой несправедливостью было решено покончить. Нашей команде удалось протестировать решение «в бою», о результатах — ниже.

image

P.S. Под катом много таблиц, реальных цифр и прочего «мяса». Для любителей погрузиться в суть — welcome!
Читать полностью »

Как отрубали свет в маленьком дата-центре: дешёвый способ аварийного развёртывания - 1

Есть небольшой дата-центр около производственной компании в небольшом городе довольно далеко от Москвы. Он нужен круглосуточно. Так получилось, что ввод от электросети там только один, а ДГУ нет. Потому что компания не айтишная, а производственная, правильно проектировать они когда-то не стали. Потому что когда-то всё и так работало.

Луч питания начал шалить. Каждую неделю свет отрубали на несколько часов, причём лотерейным образом: могли на час, а могли и больше. Закономерностей нет.

Админ предложил купить дизель, но бизнес сказал, что это не админское дело. Его дело — обеспечить простой не больше часа. В оборудование они только что вбухали много денег, поэтому уходить в облако нельзя, а коммерческих дата-центров, чтобы перевезти туда оборудование, поблизости нет.
Читать полностью »

Роковые 43 секунды, которые вызвали суточную деградацию сервиса

На прошлой неделе в GitHub произошёл инцидент, который привёл к деградации сервиса на 24 часа и 11 минут. Инцидент затронул не всю платформу, а только несколько внутренних систем, что привело к отображению устаревшей и непоследовательной информации. В конечном счете данные пользователей не были потеряны, но ручная сверка нескольких секунд записи в БД выполняется до сих пор. На протяжении почти всего сбоя GitHub также не мог обрабатывать вебхуки, создавать и публиковать сайты GitHub Pages.

Все мы в GitHub хотели бы искренне извиниться за проблемы, которые возникли у всех вас. Мы знаем о вашем доверии GitHub и гордимся созданием устойчивых систем, которые поддерживают высокую доступность нашей платформы. С этим инцидентом мы вас подвели и глубоко сожалеем. Хотя мы не можем отменить проблемы из-за деградации платформы GitHub в течение длительного времени, но можем объяснить причины произошедшего, рассказать об усвоенных уроках и о мерах, которые позволят компании лучше защититься от подобных сбоев в будущем.
Читать полностью »

Несмотря на надежность современных центров обработки данных, для критически важных объектов необходим еще один уровень резервирования, ведь вся IT-инфраструктура может выйти из строя из-за техногенной или природной катастрофы. Для обеспечения катастрофоустойчивости приходится строить резервные ЦОДы. Под катом наш рассказ о возникающих при их объединении (DCI — Data Center Interconnection) проблемах.

Технологии WDM: объединяем дата-центры в катастрофоустойчивые кластеры - 1
Читать полностью »