Рубрика «хранение данных»

 

Upspin: новая глобальная файловая система от Google - 1

На днях стало известно о новом проекте Upspin, который разрабатывается группой инженеров из корпорации Google. Основная задача участников проекта — создание фреймворка для обеспечения безопасного совместного доступа к файлам. Upspin, если коротко, задает набор протоколов, интерфейсов и прочих программных компонент, что позволяет связать вместе различные данные, включая ФС и сервисы хранения. Написан фреймворк на язык Go. Распространяется он под лицензией BSD. Стоит отметить, что сам проект — не официальная разработка Google, а «хобби» сотрудников.

Вне зависимости от того, где находятся файлы, Upspin унифицирует доступ к ним, так что получить данные можно из практически любой точки глобальной сети. По словам разработчиков, их разработка является попыткой решить проблему с текущей фрагментированностью различных программных элементов для совместного доступа к файлам. В результате пользователю, который работает с разными платформами, необходимо тратить время на выполнение промежуточных загрузок, сохранений и переупакови файлов.
Читать полностью »

Сравнить цены на облачные платформы у разных провайдеров не так просто, как может показаться на первый взгляд. У каждого провайдера свой алгоритм ценообразования и различные условия получения скидок. К тому же, провайдеры регулярно проводят корректировки цен на свои продукты. Сегодня мы попробуем выяснить при соблюдении каких факторов можно получить наиболее выгодную скидку и, тем самым, сэкономить при покупке облачной платформы.

image
Выбери своё облако

Публикация учитывает последние снижения цен от 1 декабря 2016 платформы AWS последних поколений m4 и c4, а также обзор новейшего инстанса AWSr4.
Читать полностью »

За всеми делами последней недели я совсем пропустил замечательную новость, связанную с Azure — Managed Disks вышли из стадии preview и теперь доступны для работы.

Релиз Azure Managed Disks - 1

Что это значит для администраторов? Те, кто уже использовал Azure для размещения своих серверов, помнят, что для создания виртуальной машины вам нужно было сначала создать сущность Storage Account для хранения данных, а уже затем в нём создать диски для своих серверов. Storage Account очень полезный инструмент, который может использоваться для различных целей, но здесь он скорее мешал, чем помогал. Во-первых, он имеет ограничение на суммарное быстродействие по IOPs, а значит вам нужно было следить сколько именно дисков вы туда уже положили. Во-вторых, это заставляло иногда заниматься переносом дисков между Storage Accountами (по разным причинам), что занимало время и, в общем, раздражало.

Всё это уходит в прошлое. Вы, по-прежнему, можете использовать Storage Accounts для хранения различных данных, но для создания серверного диска этот промежуточный слой больше не нужен. Под катом немного подробностей и технических моментов.
Читать полностью »

Переменная облачность: снижаем расходы на бэкапы - 1

Гибридные облака стали одним из ключевых решений для оптимизации современного бизнеса в малых и средних компаниях. По сравнению с установкой и обслуживанием собственных серверов, они легче масштабируются, что позволяет оптимизировать расходы на ИТ-инфраструктуру. Одновременно в гибридных облаках сохраняется бо́льшая доступность приложений и данных по сравнению с их размещением в публичном облаке. Вместе с тем, переход к гибридным платформам создал новые вызовы для поставщиков облачных решений и их клиентов. Прежние схемы резервного копирования и аварийного восстановления данных оказались малоэффективными из-за специфики новых систем. В этой статье мы рассмотрим недавно представленное решение Acronis для облачной платформы Microsoft Azure.
Читать полностью »

За время своей работы я часто встречался с проблемами нехватки ресурсов корпоративных ЦОД, которые можно сформулировать, например, следующим образом: «У нас не хватает физического места для размещения оборудования», «У нас не хватает подведенной мощности» и так далее и тому подобное. Решение подобных проблем «в лоб» ведет к очевидному ответу – выключить и вывести из эксплуатации часть ИТ-оборудования, либо произвести замену оборудования на более эффективное по соотношению производительность/потребление/физические размеры.

В большинстве случаев оказывается, что ресурсов на самом деле в избытке, но используются они, мягко скажем, расточительно. Проблема заключается зачастую в банальном раздолбайстве либо развитии корпоративного ЦОДа экспансивно, так сказать по унаследованным принципам. Принимаемые решения не проверяются на предмет эффективного использования имеющихся ресурсов, в организациях нет методики их проверки и, в результате, мы получаем то, что получаем.

Если вы для себя поняли, что так дальше жить нельзя, рекомендую начать с чтения блогов таких компаний как: Крок, Билайн, Data Line. У них можно найти статьи, где они делятся своим опытом в области энергоэффективности. Их методы работают — PUE коммерческих площадок находится в пределах 1,3-1,4 (у кого-то поменьше даже) что при TIER III является отличным результатом. Однако в какой-то момент вы поймете, что у них там своя вечеринка с мегаваттами, резервами и опытным персоналом. И вам на ней не место.

Что же делать простым смертным, у которых ЦОД – это 10 стоек, 200 кВт мощности, всегда не хватает рук и времени?
Читать полностью »

Комментарии к записи Все что каждый должен знать об облачном видеонаблюдении отключены

О VSaaS написано много, но, как правило, вся эта информация достаточно разрознена, и часто посвящена какой либо одной стороне облачного видеонаблюдения. В итоге у пользователей часто создается впечатление, что вроде бы о чем речь и понятно, но цельной картины и понимания как это можно использовать нет.

Облачное видеонаблюдение одна из самых перспективных технологий наряду с видеоаналитикой. Редкий эксперт не объявит видеоаналитику и облачное видеонаблюдение «The Next Big Thing» систем видеонаблюдения.

Мировой рынок VSaaS в прошедшем 2015 году достиг уровня 789,5 миллионов долларов по данным доклада IHS, что от общего объема рынка видеонаблюдения составляет примерно 5%.

Несмотря на такой скромный результат, на этот рынок, тем или иным способом, выходят почти все крупнейшие мировые производители систем видеонаблюдения под катом попробуем разобраться как они это делают и зачем.

image
Читать полностью »

К началу 2017 года едва ли не каждая крупная компания, будь то банк или медицинский центр, позиционирует себя как ИТ-компания. И в этом есть большая доля истины — многие отрасли плотно завязаны на применении информационных технологий и работе с узкими специалистами: разработчиками, программистами, системными инженерами. В таких условиях переживает трансформацию одна из самых нужных ИТ-специальностей — системный администратор. И дело совсем не в DevOps, до его победного шествия ещё далеко. Дело в том, что профессия сисадмина давно перестала быть историей эникейщика с бубном. Сегодня от него требуется профессионализм, глубокое владение всеми направлениями ITAM и оперативная реакция на любые проблемы, потому что зачастую от этого зависит прибыль и репутация компании. На Хабре есть тысячи статей про системное администрирование и самые тонкие нюансы. Мы хотим поговорить о том, какой он, портрет современного сисадмина, и какие трудности и вызовы он должен ежедневно преодолевать.

Сисадмин-2017: штрихи к портрету - 1
Котик современного админа. Другие админы — другие котэ
Читать полностью »

HTTPS становится всё более сильным трендом современного интернета. И это хорошо, особенно, когда клиенты, взаимодействуя с серверами, обмениваются с ними конфиденциальными данными. Для того, чтобы пользоваться HTTPS, нужен SSL-сертификат, который применяется для проверки подлинности сервера. Проект Let’s Encrypt значительно упростил процесс получения SSL-сертификатов. До его появления всё было гораздо сложнее.

image


Let’s Encrypt использует Certbot от Electronic Frontier Foundation для автоматизации процесса получения SSL-сертификата. Поддерживаются разные типы веб-серверов (Apache, nginx, и другие), которые работают на Unix-подобных ОС. Если ваш сервер соответствует системным требованиям Let’s Encrypt, это значит, что вы сможете получить сертификат в практически полностью автоматическом режиме. К сожалению, связку Node.js/Express.js Let’s Encrypt не поддерживает. То есть, в данном случае автоматически получить сертификат от Certbot не получится. Однако, не всё потеряно. Используя Let’s Encrypt и Certbot, сертификат не так уж и сложно получить вручную.
Читать полностью »

Всем привет! Очень радует, что первая публикация от том как мы создавали наш хостинг пришлась многим по душе. Спасибо за ваше мнение и комментарии и учитывая ваши пожелания, продолжим. В сегодняшнем материале будут небольшие отступления, они и как раз послужат ответами на некоторые вопросы, которые мне задавали.

Предыдущая публикация

Напомню, что в прошлый раз мы остановились на приобретении и монтаже дизель генератора, в дальнейшем ДГУ. А в целях противопожарной безопасности к нему прилагался модуль порошкового пожаротушения отечественного производства. Такие модули широко используются во многих сферах деятельности, благодаря удобному расположению, так как он монтируется на потолок, эстетичному внешнему виду, а также возможностью запуска как принудительного, так и самостоятельного в режиме срабатывания во время пожара. Нам к великому счастью применить его не удалось. Опять же никаких инструкций не прилагалось, разбирались сами, но там достаточно всё просто. Монтируется по типу люстры, срабатывает от повышения температуры. Ну а для принудительного приведение в действие от него идут контакты, на которые необходимо подать напряжение в 12 В. Вот его фото.

image
Читать полностью »

image

Введение

Информационная система с точки зрения пользователя хорошо определяется в ГОСТ РВ 51987 — «автоматизированная система, результатом функционирования которой является представление выходной информации для последующего использования». Если рассматривать внутреннюю структуру, то по сути любая ИС является системой реализованных в коде взаимосвязанных алгоритмов. В широком понимании тезиса Тьюринга-Черча алгоритм (а сл-но ИС) осуществляет трансформацию множества входных данных в множество выходных данных.
Можно даже сказать, что в трансформации входных данных и есть смысл существования информационной системы. Соответственно ценность ИС и всего комплекса ИС определяется через ценность входных и выходных данных.
Исходя из этого проектирование должно начинаться и брать за основу данные, подстраивая архитектуру и методы под структуру и значимость данных.

Хранимые данные
Ключевым этапом подготовки к проектированию является получение характеристик всех наборов данных, планируемых к обработке и хранению. Эти характеристики включают в себя:
— Объем данных;
— Информация о жизненном цикле данных (прирост новых данных, срок жизни, обработка устаревших данных);
— Классификация данных с т.з. влияния на основной бизнес компании (то триаде конфиденциальность, целостность, доступность) вместе с финансовыми показателями (напр. стоимость утери данных за последний час);
— География обработки данных (физическое расположение систем обработки);
— Требования регуляторов по каждому классу данных (напр. ФЗ-152, PCI DSS).

Читать полностью »