Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды

в 15:27, , рубрики: big data, switch supernap, Блог компании ua-hosting.company, дата-центр, ит-инфраструктура, оптимизация, сервер, хостинг

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 1

Развитие ИТ-инфраструктуры — это неуклонный процесс, который был, есть и непременно будет, набирая все только большие обороты. Взяв очередную высоту стандартов осуществления своей деятельности, перед сетевыми инженерами открываются новые горизонты, достижение которых становится для них очередным вызовом и основой их повседневных трудов. Для успешного функционирования ИТ-компаний всегда было очень важным точно определить цели, направления развития, самые актуальные тренды ведь как можно наблюдать именно ИТ-сфера находится на самом острие технологического прогресса и особо подвержена внедрению нововведений. В древности, за возможностью заглянуть в день грядущий, люди обращались к оракулам и вещунам, сейчас же эту столь вакантную деятельность «окучивают» профессиональные ассоциации, проводя всевозможные опросы и создавая на их основе самые разносторонне направленные отчеты.

Именно таким отчетом, совсем недавно, порадовала ИТ-сообщество AFCOM(Association for Computer Operation Management). Предметом полномасштабного исследования стало функционирование дата-центров. Со слов представителей AFCOM представленный отчет является настоящим событием, поскольку охватил самые широкие слои специалистов задействованных в работе ЦОД(Центр Оброботки Данных). Сетевые инженеры, менеджеры, программисты и владельцы компаний-провайдеров в представленном докладе дадут нам более четкое виденье той ситуации, в которой отрасль находится сейчас и где она окажется в ближайшие 3-4 года. Далее в статье будут представлены основные акценты на которых базируется вышеупомянутый отчет, что претендует быть наиболее репрезентативным и наиболее актуальным среди всех аналогичных проведеных в 2015 году.

Будущее за мега дата-центрами

Из года в год мы слышим про огромные дата-центры, которые все чаще возводят такие лидеры ИТ-отрасли как Amazon, Facebook, Google, Yahoo, IBM тем самым явно порождая новый тренд. Такая ситуация определенно будет продолжаться и в ближайшие годы, что в свою очередь непременно приведет к доминированию этих гигантских площадок над более мелкими – привычными нам дата-центрами. Следствием наступления еры гигантов, общее количество ЦОДов неуклонно будет сокращаться, отдавая потоки стремительно растущего из года в год объема трафика наиболее крупным инфраструктурным узлам.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 2

«По нашим расчетам к 2018 году в мега дата-центрах будут размещаться 72.6 процентов всех предоставляемых хостинг услуг, при этом площадь серверных, от общего числа, относящихся к упомянутым дата-центрам будет составлять уже 44.6 процентов. По состоянию на 2013 площадь мега дата-центров от общего числа площадок составляла всего 19.3 процентов» высказался по этому поводу начальник аналитического отдела IDC(International Data Corporation) Ричард Вилларс (Richard Villars).

Если к столь точно вычисленным процентам сотрудниками IDC можно отнестись с долей скептицизма, то сам вектор укрупнения дата-центров не вызывает у специалистов отрасли никакого сомнения. Почему прогресс пошел именно по этому пути развития не удивительно, в полной мере понять его истоки можно основываясь на комментариях представителей двух противоборствующих сторон: операторов мега дата-центров и сетевых инженеров эксплуатирующих небольшие серверные площадки на предприятиях и не больших компаниях.

«Услуги предоставляемые мега дата-центрами в абсолютном большинстве случаев будут дешевле и существенно качественнее нежели у их малых собратьев» бескомпромиссно заявляет Адам Крамер (Adam Kramer) – вице-президент по развитию Switch SUPERNAP. «Наша компания сделала ставку не просто на дата-центры гиганты, некоторые из которых уже успешно функционируют, наш проект Fiber SuperLOOP стал действительно прорывом в понимании существования ИТ-инфраструктуры будущего. Имея в своем распоряжении структуру из комплекса мега дата-центров объединенных оптико волокном с задержкой сети не превышающей 7 миллисекунд, мы получаем колоссальный потенциал моментального наращивания мощностей для наших клиентов, перераспределения пиковой нагрузки, обеспечения резервирования, что дает нам возможность оставить далеко позади наших конкурентов».

Позицию представителей крупного бизнеса понять не сложно, но то что по этому поводу высказали операторы не больших серверных площадок стало некоторой неожиданностью. Большая часть опрошенных операторов, хоть и не в такой категорической форме как это сделал Адам Крамер, были едины в своем прогнозе, что на протяжении ближайших десяти лет большинство мелких серверных площадок в Европе и Северной Америке прекратит свое существовании. В отличии от привычных в таком вопросе аргументов гибкости малых дата-центров и дешевизны серверных комнат на предприятиях, акцент был расставлен несколько по другому.

«В наше время изолированная от мира сеть компании это скорее исключение из правил, которое может быть продиктовано завышенным требованием к ее безопасности. Необходимость иметь сотрудникам доступ к востребованным ресурсам сети предприятия из любой точки мира это уже данность. Естественно такой функционал под силу обеспечить каждой уважающей себя компании своими силами, но, как показывает практика, с каждым годом это становится все дороже и бессмысленнее. Возросшие требования к нагрузкам на сеть, критичность доступности данных 24/7, приемлимое время реакции технической поддержки – SLAs, явно привод к увеличению счетов на поддержание корпоративных сетей, в тоже время мы видим все более возрастающее разнообразие предложений хостинг компаний, цены на услуги которых с каждым годом становятся все более доступными. Обеспечить отказоустойчивость серверной на уровне TIER IV для небольших и средних компаний это и вообще непосильная задача, в тоже время для крупных дата-центров внедрение этого стандарта уже стало вполне обыденным делом»- отметил Ричард Вилларс.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 3

Согласно представленным данным опроса Uptime Institute в прошлом году, собственной серверной инфраструктурой решили обзавестись лишь 18 процентов крупных компаний, в ранние годы этот процент был куда выше и достигал 46 процентов.

«Также немаловажным фактором в массовом уходе от малых серверных площадок, к крупным дата-центрам в ближайшем будущем, можно назвать программную среду. Если вы хотите использовать готовый корпоративный программный продукт, вы все чаще будете сталкиваться с невозможностью применения его в масштабах «серверной подсобки», это является следствием того, что уже сейчас требования таких продуктов к топологии сети бывает довольно требовательным. В то время когда крупные компании могут откинуть готовые программные решения и позволить себе создание собственных рабочих оболочек под онлайн сервисы, для малых компаний, в случае которых небольшая серверная могла бы быть достаточно эффективной, разработка собственных платформ это уже утопия. Переплачивая за использования «железа», облачные сервисы могут дать економию средства потребителю предлагая програмную оболочку готовую для использования «под ключ»» подметил аналитик Wikibon Давид Флойер (David Floyer).

ИТ-инфраструктура берет курс на озеленение

Поскольку создание дата-центров, где одна лишь только стойка может потреблять до 40 кВт, это всегда ощутимое событие для местных энергосетей, проектирование собственных энергогенерирующих мощностей становится необходимым этапом, но почему выбор все чаще падает на возобновляемые источники энергии? Вопрос об актуальности использования дата-центрами именно возобновляемых источников энергии является достаточно неоднозначным. ИТ-оборудование потребляет с одинаковым аппетитом энергию произведенную как солнечными панелями, так и энергию добытую в результате сжигания «неэкологического» каменного угля, однако специалисты едины в своих ожиданиях — грядет все более тесное сплетение ИТ-индустрии и зеленых технологий. Для такой перспективы есть два субъективных, но от того не менее важных, фактора: административный, маркетинговый. В США, Японии, странах Европы существуют весьма серьезные стимулы, от субсидий до запретов, использования компаниями возобновляемых источников энергии, а также не производящих СО2. С точки зрения маркетинга, в современном мире, не быть «зеленым» порою может быть весьма рискованно для бизнеса. Риск идет как от структурированных организаций, так и от общих настроений потенциальных клиентов. Организации вроде Green Peace, периодически создают «позорные списки» компаний продуцирующих загрязнение среды парниковыми газами и ядерными отходами, могут своей деятельностью легко подорвать функционирование существующего, или создание запроектированного ЦОДа.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 4

«У менеджеров крупных компаний-провайдеров не осталось сомнений по поводу необходимости использования возобновляемых источников энергии, проблема с их внедрением заключается только в дороговизне модернизации уже существующих сооружений» говорит Матт Стансберри (Matt Stansberry) – контент директор Uptime Institute «Наиболее зелеными компаниями сейчас считаются Apple, Facebook, Google однако не стоит забывать, что статус зеленых не делает их наиболее эффективно использующими энергоресурсы. До определенной степени общественность вводится в заблуждение. ЦОД на котором применяются наиболее эффективные системы теплоотвода может быть существенно гуманнее к природным ресурсам Земли нежели иной ЦОД, даже при условии что он целиком обеспечен возобновляемыми источниками энергии».

В отличии от сотрудников Uptime Institute представители компаний-провайдеров вкладывающих огромные средства в создания гигантских солнечных, ветровых и геотермальных электростанций с нескрываемым энтузиазмом рапортуют о своих успехах в «озеленении» своей инфраструктуры, видимо такое положение вещей в ближайшие годы будет лишь укреплятся.

«Место выбранное нашими проектировщиками для создания Switch SUPERLOOP действительно уникальное, оно позволяет нам эффективно использовать не только солнечную, ветровую и геотермальную энергию, также мы имеем возможность использовать в системе охлаждения на 93 процента техническую воду, уже используемую ранее другими пользователями» подтвердил общее мнение своих коллег Адам Крамар «Уже сейчас мы заключили контракт на обеспечение нашего проекта энергией от будущей солнечной электростанции проектная мощность которой составит не менее 100 МВ. Расположится наша новая станция неподалеку от Лас-Вегаса».

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 5

Оптимизация и плановое сокращение уровня расходов

Давно канули в лету времена слабой финансовой дисциплины ИТ-подразделений на предприятиях и в научных организаций. С каждым годом, магия мигающих свето-диодов и ритмичный шум вентиляторов все меньше производит завораживающее впечатление на руководящий менеджмент компаний и как результат ИТ-инженеры все чаще сталкиваются с практикой урезания бюджетов своих отделов и стают перед лицом борьбы за повышение показателей производительности.

Как показывает опрос организации 451 Research, из 1200 респондентов лишь 17 процентов заявили, что их компании целиком отказались поддерживать собственную сетевую инфраструктуру переведя ее в крупные дата центры, сняв с себя основные проблемы связанные с подержкой собственных серверных мощностей. В то же время, согласно вышеупомянутому отчету 49 процентов опрошенных утверждали, что в их компаниях активно используется как внутренняя структура хранения и обработки данных так и внешняя, а это уже большое подспорье для проведения анализов и поисков путей оптимизации сетевой структуры. Как можно увидеть из приведенных данных, «призрак» повышения эффективности труда задевает довольно много ИТ-специалистов, как инженеров так и менеджеров.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 6

«Когда речь идет о небольших хранилищах данных, наши исследования показывают весьма стабильные бюджеты выделяемые на эти подразделения. Несмотря на драматически возрастающие потребности и нагрузки на ИТ-инфраструктуру, руководители компаний не хотят существенно пересматривать статью расходов на ИТ-составную. В отличии от инженеров заведующих небольшими серверными, их коллеги в крупных дата-центрах стыкаются с необходимостью увеличения эффективности работы ИТ-инфраструктуры уже по несколько другим причинам, основная причина это существующая жесткая конкуренция на рынке услуг» — объясняет сотрудник по связям 451 Research Тим Джеферсон (Tim Jefferson).

Задевая эту тему, весьма характерным параметром может послужить энергопотребление современного ИТ-оборудования. Если в 90-х годах среднее потребление электроэнергии серверной стойкой рассчитывалось на уровне 1 кВт на метр квадратный, то сейчас этот показатель стартует от 6 кВт и выше, а это выдвигает уже новые требования к сопутствующим компонентам серверных.

Если с необходимостью улучшений в общем то понятно(меньше, легче, економнее), давайте рассмотрим основные точки оптимизации, которые выделили в проведенных опросах специалисты отрасли.

Кардинальный отказ от старых решений в пользу новых

Для небольших хранилищ данных на предприятиях, существенная оптимизация может состоять в частичном, или даже полном отказе от эксплуатации «внутренних» хранилищ в пользу передачи этой задачи на подряд крупным дата-центрам. Как отмечали опрошенные, в рамках «серверной комнаты» с размерами порядка десятков квадратных метров, отдача от мелких рацпредложений зачастую сводится к нулю, чего не скажешь о техже решениях в масштабах крупных ЦОД.

Размеры

Точный расчет потребностей рынка ИТ-инфраструктуры еще на этапе проектирования дата-центра является ключевым компонентом, недостаток мощностей столь же губителен для эффективного бизнеса сколь и их переизбыток.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 7

Инновационность сооружения

Применение самых современных материалов и передовых технологий делает функционирование серверного оборудования на порядок эффективнее. Затраты на охлаждения сетевого оборудования с каждым годом становятся все меньше, что является результатом организации в сооружениях из серверных стоек холодных и горячих коридоров, атмосферное охлаждение стоек и конечно же применение теплоотвода за счет размещения оборудования в специальных жидкостях.

«Благодаря нашей работе по модернизации дата-центра в Калифорнии, время полного использования мощностей охлаждающей системы сократилось всего до 210 часов в год. На уровне в 83 процента всего времени, модернизированный ЦОД и вообще вентилируется исключительно за счет атмосферного воздуха, который естественно проходит предварительную фильтрацию. Кроме того нашими специалистами была организована система распредиления нагрузки на оборудования таким образом, что клиенты с наиболее ресурсоемкими проектами целенаправленно размещались в зонах повышенного охлаждения»- сказал Рон Пепин (Ron Pepin) исполнительный директор компании NaviSite, основная деятельность компании собственно и состоит в проведении оптимизаций на существующих ЦОД.

Вышеупомянутые слова Рона также подтверждают многие участников проведенного опроса, которые отметили ужесточение всевозможных мониторинга и как результат контроля над, порою, самыми незначительными параметрами в работе дата-центров.

Целостное виденье

Сооружение дата-центров не как отделенных от мира форпостов, а как дополняющих его частичек пазла, также внесло свою лепту в оптимизацию затрат на их функционирование. Уже сейчас работают десятки дата-центров избыточное тепло создаваемое которыми идет на нужды офиса, городской инфраструктуры, тем самым возвращая часть затраченных средств своим владельцам.

Изменения структуры повседневных задач инженеров обслуживающих ИТ-инфраструктуру

По оценкам принявших в проведенном опросе людей, в ближайшие 3-4 года особо остро изменения своих повседневных задач ощутят работники обслуживающие корпоративную серверную инфраструктуру. Данная тенденция активно проявляется уже сейчас и причиной послужившей этому стало все более частое использование компаниями облачных сервисов. В то время когда цифровая жизнедеятельность компаний все чаще перекочевывает из серверных комнат в дата-центры, сетевые инженеры постепенно уходят от работы с «железной» частью инфраструктуры и все чаще стыкаются с ее «программной» составной.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 8

«Имея дело с гибридной структурой собственных серверных мощностей и вынесенных в дата-центры, проблема отладки и увязки всего этого хозяйства в рамки единой экосистемы становится серьезным вызовом для многих сисадминов, требую от них новых знаний и опыта» — Джеф Клаус (Jeff Klaus) – управляющий менеджер корпорации Intel. «Отслеживание температуры в серверной комнате, резервирование электропитания, прокладка коммуникаций эти и другие схожие физические процессы перестают быть основным видом работ системных администраторов на предприятиях. Поскольку организация программного компонента, его мониторинг и отладка зачастую не требует постоянного, физического присутствия специалиста на предприятии, такой вид услуг все чаще будет уходить на аутсорсинг».

Что касается персонала крупных ЦОД, то часть опрошенных респондентов выразили мысль, согласно которой некоторые изменения в повседневных задачах торкнутся и этот разряд сотрудников ИТ-сектора. В первую очередь изменения заденут не столько технических специалистов, как именно менеджеров по работе с клиентами. Столкнувшись с новыми реалиями налаживания клиентами ЦОД сложной инфраструктуры на основе совмещения своих мощностей и дата-центров, менеджеры по работе с клиентами все чаще вынуждены будут отвечать на сложные технические вопросы. Как отметил один из опрошенных специалистов «Скоро мы будем иметь ситуацию когда даже самые хорошие «продажники» не владеющие специфическими знаниями в сфере взаимодействия программных оболочек и налаживания связи среди разбросанных локальных ИТ-узлов, серьезно будут рисковать не выполнить свои квартальные планы по продажам».

Кадры решают все

Что касается кадрового вопроса, весьма интересным и несколько неожиданным стал результат опроса менеджеров высшего звена и владельцев компаний-провайдеров. Практически все опрошенные показали, что в данные момент компании занимающиеся предоставлением услуг ЦОД-ов испытывают серьезный кадровый голод, который к 2020-му году будет только возрастать. Удивителен был не столько сам факт не хватки специалистов, вся ИТ-индустрия в общем страдает от этой проблемы, неожиданными стали цифры, по которым 81 процент менеджеров сталкиваются с проблемой поиска квалифицированных кадров, а время на поиски сотрудника который требуется на закрытие актуальной позиции слишком велико.

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 9

Основных причин кадрового голода на самом деле несколько. В первую очередь это конечно же рост производственных мощностей, которым необходимо все больше и больше высококвалифицированных специалистов, подготовка которых занимает не один год. Во вторую очередь загущает краски прогресс, что порождает совершенно новые вакансии, по которым приходится вырывать специалистов из всякого рода смежных отраслей производства.

Мега дата-центры вроде возводимых Switch SUPERNAP являются весьма характерным примером, того когда в очень короткие сроки открываются сотни новых вакансий в условиях существующих проблем с трудовыми ресурсами. Поскольку к 2020-му году ожидается рост ввода в эксплуатацию гигантских ЦОД то и проблема с наполнением этих ИТ-узлов сетевой инфраструктуры кадрами становится огромной. Что касается упомянутой компании, то ее руководство видит проблему и подходит к ее решению весьма серьезно, налаживая связи с учебными заведениями штата Невада.

«Мы тесно работаем с образовательной системой штата. Институты, колледжи и даже школы это все те места, где мы отбираем своих будущих сотрудников. Благодаря планированию своей деятельности мы можем сформировать запрос на молодых специалистов, которые после окончания учебы смогут найти вое первое рабочее место в нашей компании»-отметил Адам Крамер – вице-президент Switch SUPERNAP.

«Архитекторы, экологи, инженеры тепло-энергетики, инженеры водоснабжения и многие другие это те специалисты, с которыми ранее функционирование дата-центров не имело ничего общего и без которых уже сейчас просто невозможно представить себе работу крупного ЦОД» отметил Карстен Шерер (Karsten Sherer) сотрудник аналитической компании TEKSystem.

Весьма благоприятная ситуация для сотрудников дата-центров складывается и в плане перспектив личного развития. Возникшая проблема с кадровым голодом, стала настоящим подарком судьбы для существующих работников. Как отмечают многие опрошенные рядовые сотрудники, зачастую их компании предлагают для них бесплатные курсы повышения квалификации, возможность за счет компании получить образовательные сертификаты и весьма заманчивые возможности быстрого карьерного роста, с ростом денежного довольствия.

«Близко 72 процентов опрошенных нами руководителей компаний-провайдеров заявили о том, что планируют, либо уже осуществляют программы адресного обучения своих специалистов новым, необходимым для успешной работы дата-центров знаний» утверждает Тед Лейн (Ted Lane) учредитель исследовательской фирмы Foote Partners «Все опрошенные нами руководители также подтвердили ту логику, что специалист получивший учебные, аттестационные сертификаты законно имеют право претендовать на увеличение своих окладов».

Ожидания направлений развития в сфере хранения и обработки данных до 2020 года. Основные тренды - 10

Послесловие

Приведенные результаты вышеупомянутого опроса проводились в развитых странах Европы и Северной Америки, именно для этого региона Земли они будут наиболее актуальными. В тоже время, они могут стать весьма интересными для сотрудников и клиентов услуг в сфере хостинга на постсоветском пространстве. Описанные тенденции являются довольно универсальными и актуальными не только для «западного» мира но также и для всего остального, ведь описывают проблемы роста отрасли, с которыми в той или иной мере сталкиваются на всех континентах. Как можно увидеть из приведенного материал, а в ближайшие 3-4 года, отрасль хранения и обработки данных наиболее сильно будет подвержена: укрупнению дата-центров, «озеленению», оптимизации расходов, некоторому смещению производственных задач, нехватке квалифицированных специалистов. Все эти проблемы актуальны и для нас, кроме разве что критичности использования для роботы ЦОД возобновляемых источников энергии, а это в очередной раз напоминает нам о том, что мы крепко интегрированы в современный мир и являемся его неотъемлемой составной, разделяя все его горести и радости, которые нам диктует технологический прогресс.

Автор: ua-hosting.company

Источник

* - обязательные к заполнению поля


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js