Это продолжение длинного рассказа о нашем тернистом пути к созданию мощной, высоконагруженной системы, обеспечивающей работу Биржи. Первая часть тут.
Читать полностью »
Рубрика «резервное копирование»
Эволюция архитектуры торгово-клиринговой системы Московской биржи. Часть 2
2019-05-22 в 6:47, admin, рубрики: Алгоритмы, биржевая торговля, Блог компании Московская Биржа, высокая производительность, резервное копирование, торгово-клиринговая системРезервное копирование, часть 2: Обзор и тестирование rsync-based средств резервного копирования
2019-05-21 в 6:02, admin, рубрики: backup, Burp, devops, rdiff-backup, rsnapshot, Rsync, Блог компании Southbridge, резервное копирование, Серверное администрирование, системное администрирование
Данной заметкой продолжается
цикл о резервном копировании
- Резервное копирование, часть 1: Зачем нужно резервное копирование, обзор методов, технологий
- Резервное копирование, часть 2: Обзор и тестирование rsync-based средст резервного копирования
- Резервное копирование, часть 3: Обзор и тестирование duplicity, duplicaty, deja dup
- Резервное копирование, часть 4: Обзор и тестирование zbackup, restic, borgbackup
- Резервное копирование, часть 5: Тестирование bacula и veeam backup for linux
- Резервное копирование, часть 6: Сравнение средств резервного копирования
- Резервное копирование, часть 7: Выводы
Как мы уже писали в первой статье, есть весьма большое число программ резервного копирования, основанных на rsync.
Из тех, что больше всего подходят под наши условия, я буду рассматривать 3: rdiff-backup, rsnapshot и burp.
Читать полностью »
Резервирование в Kubernetes: оно существует
2019-05-16 в 7:39, admin, рубрики: ITSumma, k8s, kubernetes, Блог компании ITSumma, высокая производительность, высоконагруженные проекты, доклад, конференции, конференция, резервирование, резервное копированиеМеня зовут Сергей, я из компании ITSumma, и я хочу вам рассказать, как мы подходим к резервированию в Kubernetes. В последнее время я много занимаюсь консультативной работой по внедрению разнообразных devops-решений для различных команд, и, в частности, плотно работаю по проектам с использованием K8s. На конференции Uptime day 4, которая была посвящена резервированию в сложных архитектурах, я выступал с докладом о резервировании «кубика», и вот его вольный пересказ. Только заранее предупрежу, что он является не непосредственным руководством к действию, а скорее, обобщением размышлений на указанную тему.
В принципе мониторинг и резервирование — это два основных инструмента повышения отказоустойчивости любого проекта. Но ведь в кубере всё балансируется само, скажете вы, всё масштабируется само, и если что-то произойдёт — поднимется само… То есть, при первом поверхностном исследовании темы, на вопрос, кто как подходит к резервированию K8s, интернет ответил мне «а зачем?» Многие думают, что кубер представляет собой такую магическую штуку, которая избавляет от всех инфраструктурных проблем и делает так, что проект никогда не упадет. Но… мир не то, чем кажется.
Эволюция архитектуры торгово-клиринговой системы Московской биржи. Часть 1
2019-05-14 в 7:00, admin, рубрики: Алгоритмы, биржевая торговля, Блог компании Московская Биржа, высокая производительность, резервное копирование, торгово-клиринговая система
Всем привет! Меня зовут Сергей Костанбаев, на Бирже я занимаюсь разработкой ядра торговой системы.
Когда в голливудских фильмах показывают Нью-Йоркскую фондовую биржу, это всегда выглядит так: толпы людей, все что-то орут, машут бумажками, творится полный хаос. У нас на Московской бирже такого никогда не было, потому что торги с самого начала ведутся электронно и базируются на двух основных платформах — Spectra (срочный рынок) и ASTS (валютный, фондовый и денежный рынок). И сегодня хочу рассказать об эволюции архитектуры торгово-клиринговой системы ASTS, о различных решениях и находках. Рассказ будет длинный, так что пришлось разбить его на две части.
Читать полностью »
Хранение, резервное копирование и каталогизация фотографий
2019-04-29 в 15:55, admin, рубрики: lightroom, облако, резервное копирование, фотография, Фототехника, хранение данныхТут периодически пишут посты про то, как хранят и бэкапят свои фотографии — ну и просто файлы. В последнем таком посте написал достаточно длинный комментарий, немного подумал и решил всё же развернуть его в пост. Тем более, что несколько поменял метод бэкапа в облако, может будет полезно кому.
Домашний сервер, где происходит многое из описанного ниже:
Что надо сохранять?
Самое важное и объёмное у меня — фотографии. Изредка видео, но очень изредка — оно слишком много места занимает и слишком много времени отнимает, потому я его не слишком люблю, снимаю только короткие ролики, которые валяются в той же куче, где и фотографии. На текущий момент фотоархив у меня занимает примерно 1,6 терабайта и растёт где-то на 200 гигабайт в год. Другие важные вещи гораздо менее объёмны и с ними меньше вопросов в плане хранения и бэкапа, десяток-другой гигабайт можно распихать по куче бесплатных или очень дешевых мест, начиная от ДВД и заканчивая флэшками и облаками.
Читать полностью »
Байки разработчика 1С: админские
2019-04-29 в 8:47, admin, рубрики: 1С, Администрирование баз данных, Восстановление данных, резервное копирование, системное администрирование, системный администратор, юморВсе разработчики 1С так или иначе тесно взаимодействуют с IT-службами и непосредственно с системными администраторами. Но не всегда это взаимодействие проходит гладко. Несколько забавных историй об этом я и хотел бы Вам рассказать.
Читать полностью »
Linux Backup от Veeam на ОС «Эльбрус». Импортозамещение [‘?’ | ‘.’ | ‘!’]
2019-04-22 в 5:05, admin, рубрики: linux, open source, Veeam, veeam agent for Linux, Блог компании «Veeam Software», импортозамещение, Настройка Linux, Программирование, резервное копирование, системное администрирование, ЭльбрусВсем привет.
Недавние статьи на Хабре Импортозамещение на практике. Часть 1. Варианты и Не долго музыка играла… или как ОС Эльбрус так и не стала свободной не оставили меня равнодушным. Я решил поизучать этот вопрос в ключе задачи резервного копирования. Тем более, что в этой статье продукты Veeam Software упоминаются, а значит, вопрос может быть актуальным именно в ключе импортозамещения.
Первым делом я решил скачать ОС «Эльбрус», а точнее — только доступный дистрибутив для архитектуры x86_64, посмотреть, как он устроен, и попробовать поставить на него Veeam Agent for Linux. Желающих узнать, что из этого получилось, прошу под кат.
Читать полностью »
В поисках оптимального средства
2019-03-22 в 15:00, admin, рубрики: Commvault, IBM Spectrum Protect, Micro Focus Data Protector, Quest Netvault, veeam backup, Veritas NetBackup, Блог компании Softline, резервное копированиеВ этой статье я расскажу, как познакомился с Quest Netvault Backup. О Netvault Backup, когда этот софт еще принадлежал Dell, я уже слышал много положительных отзывов, но мне еще не приходилось его «щупать» руками.
Uptime day: 12 апреля, полёт нормальный
2019-03-22 в 4:43, admin, рубрики: admindivision, badoo, bitrix24, ITSumma, kubernetes, mcs, qrator, uptime, uptimeday, Блог компании ITSumma, высокая производительность, конференции, распределенные системы, резервирование, резервное копирование, сложная архитектура
«Да чего же ждать от конференций? Сплошь танцовщицы, вино, гулянки» — шутил герой фильма «Послезавтра».
Наверное, на каких-то конференциях и не такое бывает (делитесь историями в комментах), но на it-сборищах обычно вместо вина пиво (по завершении), а вместо танцовщиц — «танцы» с кодами и информационными системами. 2 года назад мы тоже вписались в эту хореографию, организовав конференцию Uptime day. В этом апреле, на День космонавтики, мы проводим её уже в четвёртый раз — традиционно бесплатно и традиционно под аккомпанемент вопросов «зачем вам это надо?»
На весеннем Uptime day будем говорить об организации резервирования веб-проектов со сложной распределённой архитектурой — способам переключения с боевого окружения на резервное, а также разбору различных сценариев отката и переключения на резервную площадку в случае неудачного деплоя.
А зачем нам это надо?.. Об этом под катом. И о том, чем вам будет полезна конференция Uptime day.
«Бэкап мне на ленту запили». Рассказ от первого лица
2019-03-20 в 9:17, admin, рубрики: tape, tape library, Veeam, veeam backup and replication, архивирование на ленту, Блог компании «Veeam Software», виртуализация, виртуальная машина, Восстановление данных, долговременное хранение, ленточные библиотеки, магнитная лента, резервное копирование, Серверное администрирование, системное администрированиеВ предыдущей статье мы поведали вам о новых фичах в вышедшем в январе обновлении Update 4 для Veeam Backup & Replication 9.5 (VBR), где осознанно не упомянули бэкапы на магнитную ленту. Рассказ об этой области заслуживает отдельной статьи, потому что новых фич было действительно много.
– Ребята из QA, напишете статью?
– Почему бы и нет!
