Рубрика «ит-инфраструктура» - 71

Примечание переводчика: На Хабре и в нашем блоге о корпоративном IaaS мы много пишем об облачных технологиях, и рассматриваем интересные инфраструктурные проекты различных компаний. Ранее мы рассказывали о масштабировании Apache Storm в Spotify, создании 20- и 30-гигабитных соединений в сетях Ethernet командой проекта 45 Drives, а сегодня речь пойдет о том, как инженеры Aribnb занимались разбиением основной базы данных проекта.

Как команда инженеров Airbnb «разбила» основную БД проекта за пару недель - 1

Каждый год трафик Airbnb растет в 3,5 раза быстрее, а его пик приходится на летний период

В этом году в преддверии летнего сезона путешествий команда по обслуживанию инфраструктуры Airbnb усердно работала над масштабированием наших баз данных. Компании необходимо было подготовитсья к летним пикам нагрузки.

Целью одного особенно важного проекта было разбиение определенных таблиц на секции (партиции) в соответствии с выполняемыми ими функциями и помещение их в отдельные базы данных. Этот проект, наверняка, потребовал бы крупных технических вложений, включая внесение изменений на уровне приложений, перенос данных и полноценное тестирование, которое бы гарантировало целостность данных и минимальное время простоя.Читать полностью »

Управление температурой в дата-центре: почему иногда можно и погорячее - 1

В нашем блоге на Хабре мы рассказываем о развитии своего облачного сервиса 1cloud, а также рассматриваем интересные вопросы развития технологий и работы с инфраструктурой. К последней теме относится и вопрос обеспечения охлаждения ЦОД. Группа ученых Университета Торонто опубликовала исследование метода, при котором температура в дата-центре специально повышается. Мы представляем вашему вниманию основные моменты этой работы.

С недавних пор значительная часть потребляемой электроэнергии и выбросов углерода приходится на дата-центры. Огромные мощности тратятся на их охлаждение, что и явилось основным мотиватором для проведения исследовательской работы в области температурного управления. Интересен тот факт, что до конца не понятно, на каком уровне необходимо поддерживать температуру в дата-центрах.

Большинство компаний устанавливает температуру, рекомендуемую поставщиками используемого оборудования, однако не ясно, как её повышение сказывается на работоспособности систем. В то же время, согласно результатам проведенных исследований, повышение температуры всего на 1 градус может сократить энергопотребление на 2-5%.Читать полностью »

Ситуационный центр Центральной ППК (электрички Московской области) — мы проделали адово большую работу - 1
Тестирование

Для того чтобы обеспечить высокое качество обслуживания пассажиров и надёжную эксплуатацию пассажирской инфраструктуры, нужен хороший инструментальный контроль. Проще говоря — системы снятия информации и её обработки. Центральной пригородной пассажирской компании (это те, кто возит вас электричками в Подмосковье) в какой-то момент захотелось прорыва в плане ухода от ручных технологий управления. Главная идея была в создании единого мозгового центра, чтобы следить, контролировать, понимать и предсказывать операционные процессы, оперативно реагировать на внештатные ситуации.

Ситуационный центр Центральной ППК (электрички Московской области) — мы проделали адово большую работу - 2
Вот так САЦ встроился в архитектуру ЦППК. Два года на проект. Два года!
Вендоры такие: модуль нормативно-справочной информации — Talend MDM.
Комплексная система аналитики — Oracle BI 11g, Pentaho DI (опенсорсные аналоги — Pentaho BA, Spago BI, JasperSoft BI,), СУБД -MS SQL Server 2012, аудиовизуальные комплексы — YCD, Samsung, колонны связи — отечественные производители, камеры видеоаналитики и видеонаблюдения — «Синезис», Samsung, Verint, Axis. IP-телефония — Cisco.

В общем, сейчас покажу, откуда мы собирали данные и что с ними делали. И почему километр железной дороги в нашей координатной сетке заменяют блок-участки, длина которых может колебаться от 700 до 1300 метров.Читать полностью »

Системы хранения Infortrend EonStor DS 4000 Gen2 – одни из первых в мире на новейшем процессоре Intel Xeon из семейства продуктов D-1500, разработанном специально для SAN энтерпрайз-уровня и облачных хранилищ, что, в совокупности с передовыми аппаратными решениями Infortrend, обеспечивает лучшую в своем классе производительность.

Если речь идет о производительности, то значение IOPS в системах серии EonStor DS 4000 Gen2 достигает 600K в сквозном канале, что на 20% выше, чем в системах предыдущего поколения. Кроме того, полоса пропускания в системах новой серии на 30% шире и достигает 11000 MB/s по чтению, 5500 MB/s по записи – это значения, которые задают новый уровень характеристик, ожидаемых от хранилищ среднего класса.

image
Читать полностью »

Во всем мире постепенно растет энергопотребление дата-центров и по прогнозу министра энергетики Ирландии Алекса Уайта в будущем расходы энергии увеличатся в разы. Министр выступал на саммите ООН по климату в Париже. Специалисты из его ведомства пришли к выводу, что именно на долю ЦОД пойдет большая часть спроса на электроэнергию в Дублине. Такой рост энергопотребления обусловлен строительством новых и расширением кампусов уже имеющихся дата-центров Microsoft, Amazon, Google и других крупных компаний. Подобные ситуации происходят во многих международных столицах. По мнению Уайта, следует уже сейчас позаботиться о проблеме стремительного роста энергопотребления ЦОД и начинать искать оптимальные пути их решения.

3 бизнес-проекта, усовершенствующие отрасль ЦОД - 1

Вполне возможно, описанные ниже бизнес-проекты могут помочь найти выход и справится с назревающей проблемой.

Читать полностью »

Пашков Юрий, Пашков Кузьма — Lead InfoSec, EMC, VMWare trainer @ training.muk.ua

Многолетний опыт преподавания по направлению «Информационная безопасность» (далее ИБ) позволяет констатировать положительные тенденции в этой области:

  • Владельцы бизнеса, наконец, стали считать риски ИБ такими же значимыми как финансовые и операционные, и все чаще ищут не только доверенных, но квалифицированных советников на должности уровня CSO (Chief Security Officer)
  • Нормативный подход к построению систем защиты позволил ИБ стать массово потребляемой услугой
  • Взрывной рост рисков ИБ поддерживает стабильно высокий спрос и предложение на рынке услуг обучения по соответствующему направлению

В тоже время налицо и отрицательные:

  • Подтвердить свою квалификацию в ИБ сегодня так же сложно, в особенности если успешный опыт работы получен в странах СНГ, а потенциальный работодатель находится в СШАЕвропе
  • Массовость приводит к проблеме консьюмеризации ИБ
  • Падает качество услуг обучения и уровень квалификации специалистов

В результате появляются целые коллективы подразделений обеспечения ИБ, которые на всех уровнях иерархии, начиная с администратора безопасности и заканчивая руководителем, бездумно выполняют требования стандартов безопасности, не задумываясь о доказательстве защищенности автоматизированной системы после их выполнения.

Настоящая статья демонстрирует возможности доказательного подхода для создания защищенных автоматизированных систем и носит учебный характер. Читать полностью »

Инфраструктура соцсети: Как устроен дата-центр Facebook - 1

В нашем блоге мы много пишем о построении облачного сервиса 1cloud, но немало интересного можно почерпнуть и из опыта других инфраструктурных проектов. Ранее мы уже рассказывали о подземных и плавучих дата-центрах. Также мы рассказывали о собственном ЦОД фотосервиса imgix, а сегодня обратим взгляд на один из дата-центров Facebook. Журналистка издания The Atlantic Ингрид Беррингтон побывала в одном из дата-центров крупнейшей мировой социальной сети Facebook в штате Айова и поделилась впечатлениями в своей заметке. Вот что интересного она увидела и сняла с помощью дрона на объекте компании Марка Цукерберга.Читать полностью »

В тяжёлые времена многие компании ищут способы сэкономить. И здесь отличным вариантом может стать б/у-оборудование, в том числе серверы. Ведь они заметно дешевле новых и при этом не менее надёжны. Так зачем платить больше?

Серверный рынок: взлёты и падения

А что происходит на российском серверном рынке? Чтобы понять тенденции, стоит немного углубиться в историю. В 2008 рост серверного рынка в РФ, по данным аналитиков IDC, составил 18%. Увеличивается спрос на эту продукцию среди малых и средних предприятий, наблюдается переход от российской техники к продуктам ведущих зарубежных производителей.

Серверный «сэконд хенд» как антикризисное решение - 1
Читать полностью »

image
Развитие ИТ во многом определяется не только внутренними факторами, научно–техническими исследованиями и разработками, но и внешними, например, доминирующими теориями управления, которые призваны теоретически обосновывать практические меры по повышению эффективности деятельности организаций разного профиля. Одно из последних течений в этой области получило название «реинжиниринг делового процесса»(«Business process reengineering»). Англоязычный термин «reengineering» на русский язык «перестройка», однако в силу специфической «нагруженности» этого понятия для российского читателя, на мой взгляд, предпочтительнее оставить прямую кальку с английского «реинжиниринг». Содержание этого понятия довольно ёмко и расшифровывается на многих страницах публикаций на эту тему по теории менеджмента. Уместность рассмотрения сути реинжиниринга – бизнеса на страницах данной статьи объясняется ключевой ролью в этом процессе ИТ.
Читать полностью »

Qualcomm выпустила собственный серверный процессор - 1

Компания Qualcomm выпустила собственную версию серверного процессора, это ARM с 24 ядрами. Таким образом, компания присоединилась к производителям серверных чипов, правда, сделала это довольно поздно. Чипы с ARM архитектурой, по мнению некоторых специалистов, могут быть альтернативой х86 в силу своей энергоэффективности.

Такой процессор может пригодиться владельцам крупнейших дата-центров мира, включая корпорации Facebook и Google, а также сервис-провайдеров и крупные компании. Новый чип, по словам разработчиков, подходит для таких сфер, как когнитивные системы, дата майнинг, SaaS и прочие.
Читать полностью »


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js