- PVSM.RU - https://www.pvsm.ru -

Жизнь после запрета Google Global Cache: Последствия для провайдеров и клиентов

В сентябре этого года Роскомнадзор разослал [1] провайдерам письма. В них было сказано, что серверы Google Global Cache, увеличивающие скорость доступа к ресурсам Google, не сертифицированы. Регулятор отметил, что наличие этого оборудования в сети провайдера повлечет наложение штрафа до 300 тыс. рублей.

В нашем сегодняшнем материале мы посмотрим, чем грозит отказ от GGC интернет-провайдерам и клиентам.

Жизнь после запрета Google Global Cache: Последствия для провайдеров и клиентов - 1 [2]
/ Flickr / freestocks.org [3] / PD

Что такое Google Global Cache

Google стремится обеспечить высокую надежность и производительность своих сервисов, сохранив низкой латентность. С этой целью компания инвестировала в разработку сетевой инфраструктуры [4]. Она состоит из трёх «слоев»: дата-центров, точек присутствия [5] (Points of Presence, или PoP) и кеширующих узлов (Google Global Cache, или GGC).

Дата-центры являются сердцем контента и сервисов ИТ-гиганта. PoP — это узлы, которые соединяют сеть Google с остальным интернетом. Серверы GGC представляют собой часть инфраструктуры, которая находится к пользователям ближе всего и располагается в сети локальных операторов.

На этих серверах временно хранится популярный контент, который часто запрашивают пользователи. Это ускоряет [6] доступ к Google-сервисам: YouTube, Google Maps, Google Play и др. Такое решение экономит полосу пропускания и компании Google, и операторам связи.

Подобные сети доставки контента (CDN) используют и другие компании. Например, «Яндекс». CDN российской компании служит [7] для улучшения качества работы Яндекс.Почты.

Как работает GGC

Без GGC контент, запрашиваемый пользователями (например, видео), поступает напрямую с серверов Google. С кеширующими серверами всю цепочку проходит только первая копия видео. Запросы последующих пользователей обслуживает кеш-узел. Алгоритм работы, согласно презентации [8] сотрудника Google Майка Аксельрода (Mike Axelrod), выглядит так:

  • Пользователь кликает на ссылку с видео.
  • DNS провайдера запрашивает у DNS Google IP-адрес контента, если тот ему неизвестен.
  • DNS-сервер Google знает, что у провайдера есть GGC-узел, способный предоставить запрашиваемый контент.
  • В ответе он передает IP-адрес этого узла, который пересылается пользователю.
  • Далее, пользователь получает нужную ему информацию с узла GGC, а не из сети Google.
  • Если запрашиваемого контента нет на GGC-узле, он запрашивает его у Google от имени пользователя и кеширует для будущих обращений.

Подробнее о том, как устроена система и какое оборудование поставляет корпорация Google провайдерам, вы можете узнать по ссылке [9].

Последствия запрета GGC

Количество кеширующих серверов Google у крупного федерального оператора довольно велико. Если от них отказаться, то нагрузка на сервера Google и магистрали провайдера увеличится. Выключение серверов GGC скажется на качестве предоставляемых сервисов Google.

Однако основной «удар» примет на себя видеохостинг. По данным [10] аналитического сайта Statista, Россия занимает третье место в мире по количеству активных пользователей YouTube в месяц. Без Google Global Cache видеозаписи на YouTube будут грузиться медленнее, время загрузки самого сайта увеличится.

Также пользователи могут лишиться возможности просматривать видео в высоком разрешении из-за ограничений пропускной способности (у многих провайдеров трафик YouTube считается локальным).

Директор некоммерческой организации «Общество защиты интернета» Михаил Климарев говорит [11], что отказ от GGC ощутят на себе и интернет-провайдеры. По данным [12] МГТС, стриминговые сервисы (YouTube, Google Видео и др.) потребляют 30% полосы пропускания. В случае отказа от серверов, операторы будут вынуждены расширить каналы передачи данных как минимум на эти 30%.

Если по сети передается видеопоток, 90% которого — YouTube, то с GGC оператор оплачивает лишь часть трафика до сервисов Google. Остальной трафик обрабатывается в дата-центре провайдера и не покидает внутреннюю сеть. Если у провайдера есть филиалы по стране, GGC позволяет экономить на магистралях, потому что трафик не будет покидать пределы одного города.

С уходом GGC этот трафик станет платным. Все это приведет к повышению цен на тарифы интернета. Или даже отказу от безлимитных тарифов. О других прогнозах можно почитать здесь [13].

Как быть провайдерам

По мнению [14] представителей телекоммуникационных компаний, сервер GGS — это не средство связи, потому не должен сертифицироваться. И запрещать пользоваться системой нельзя. Роскомнадзор, правда, такое определение отвергает [1].

Также в Рунете можно встретить мнение [15], что Роскомнадзор требует сертификацию оборудования, чтобы исключить повторение ситуации с Японией. 25 августа сотрудники Google допустили [16] ошибку в протоколе динамической маршрутизации, в результате которой клиенты крупных японских провайдеров не могли выйти в интернет на протяжении нескольких часов. У другой части населения скорость соединения значительно упала.

Еще один вариант — действия регулятора, направленные на запрет GGC, являются формой давления на ИТ-гиганта. Роскомнадзор ждет ответных действий со стороны компании и есть вероятность [14], что «оппонентам» удастся договориться.

Если этого не произойдет, интернет-провайдерам придется искать выход из ситуации. Одним из вариантов, как было отмечено выше, является увеличение стоимости тарифов или отказ от безлимитного интернета, но в этом случае операторы рискуют потерять клиентов. Увеличивать [17] ширину канала также может быть невыгодно.

Другой вариант — искать способы снижения издержек. Решить проблему запрета Google Global Cache без финансовых потерь нельзя, но можно эти потери минимизировать. Классификация и приоритезация трафика для экономии полосы пропускания способна снизить издержки, сохранив качество обслуживания (QoS) высоким.

Реализуют этот функционал системы глубокого анализа трафика — DPI. Сегодня на рынке такие решения предлагают как иностранные [18] поставщики, так и отечественные [19] — в том числе компания VAS Experts [20]. Количество установок нашей системы СКАТ по России перевалило за 500, при этом 166 лицензий выданы в 2017 году. К слову, в 2015 их было всего 60.

Система DPI дает возможность менять [21] приоритет проходящих пакетов в зависимости от протокола (DSCP/TOS в заголовке IP-пакетов, приоритет в заголовке VLAN- и QinQ-пакетов, класс трафика в заголовке MPLS-пакетов). Маршрутизаторы и шейперы используют эту информацию для обеспечения нужного качества обслуживания. Также системы DPI следят за сетью на уровнях 2–7 модели OSI и защищают её от перегрузок.

При увеличении качества видео (720p, 1080p, 4K) растет нагрузка на канал оператора. Например, в марте 2015 в Австралии трафик сервиса Netflix составил [22] 25% от общего трафика провайдера iiNet. Активное управление трафиком и гибкая настройка приоритетов обеспечивают достойную работу видеосервисов, слегка «подрезая» трафик других приложений в критические моменты.

Еще одним вариантом может стать установка собственного кеш-сервера. Такая возможность [23] есть у нашего решения СКАТ DPI [20]. По статистике 3-терабайтное кеш-хранилище под Youtube-контент для 100 тыс. абонентов снижает [21] внешнюю Youtube-полосу на 30%.

Жизнь после запрета Google Global Cache: Последствия для провайдеров и клиентов - 2
/ Схема [24] подключения кеш-сервера

Причем такая система позволит кешировать не только видеоконтент стриминговых сервисов, но и обновления для браузеров, Windows, антивирусов и другого ПО, а также часто повторяющие файлы, например картинки.

P.S. Другие материалы из корпоративного блога VAS Experts:

Автор: VAS Experts

Источник [28]


Сайт-источник PVSM.RU: https://www.pvsm.ru

Путь до страницы источника: https://www.pvsm.ru/google/266898

Ссылки в тексте:

[1] разослал: https://meduza.io/news/2017/09/20/fsb-i-roskomnadzor-predupredili-provayderov-o-nezakonnosti-serverov-google-global-cache

[2] Image: https://habrahabr.ru/company/vasexperts/blog/340846/

[3] freestocks.org: https://www.flickr.com/photos/freestocks/23984649409/

[4] сетевой инфраструктуры: https://peering.google.com/#/infrastructure

[5] точек присутствия: https://ru.wikipedia.org/wiki/%D0%A2%D0%BE%D1%87%D0%BA%D0%B0_%D0%BF%D1%80%D0%B8%D1%81%D1%83%D1%82%D1%81%D1%82%D0%B2%D0%B8%D1%8F

[6] ускоряет: https://novostimira24.ru/bez-youtube-i-drygih-servisov-chem-grozit-zapret-serverov-google-global-cache-v-rf/

[7] служит: https://habrahabr.ru/company/yandex/blog/176893/

[8] презентации: https://www.isoc.org/isoc/conferences/inet/08/docs/inet2008_kiagri.pdf

[9] ссылке: https://geektimes.ru/post/93864/

[10] данным: https://www.statista.com/statistics/280685/number-of-monthly-unique-youtube-users/

[11] говорит: https://tvrain.ru/articles/fsb_i_roskomnadzor_zainteresovalas_serverami_google_chem_eto_grozit_operatoram_i_polzovateljam-445370/

[12] данным: https://mgts.ru/company/press/news/581204/

[13] здесь: https://geektimes.ru/post/293203/

[14] мнению: http://www.rbc.ru/technology_and_media/19/09/2017/59c1544d9a79476b8e8c04e4

[15] мнение: https://www.facebook.com/roskomnadzor.official/posts/1975796546032450

[16] допустили: https://thenextweb.com/google/2017/08/28/google-japan-internet-blackout/

[17] Увеличивать: http://blog.vasexperts.ru/?p=79

[18] иностранные: https://vasexperts.ru/blog/inostrannye-proizvoditeli-dpi-i-ih-platf

[19] отечественные: https://vasexperts.ru/blog/rossijskie-proizvoditeli-dpi-i-ih-platfo

[20] VAS Experts: https://vasexperts.ru/products/skat/

[21] менять: https://vasexperts.ru/blog/varianty-ispolzovaniya-dpi-chast-1/

[22] составил: http://mashable.com/2015/04/20/netflix-traffic-explodes

[23] возможность: http://vasexperts.ru/product-cash.php

[24] Схема: https://vasexperts.ru/products/cash/

[25] Интеграция СКАТ DPI: опыт интернет-провайдера X-Communication: https://vasexperts.ru/blog/skat-dpi/integraciya-skat-dpi-c-billingom-cherez-radius-opyt-internet-provajdera-x-communication/

[26] Конвергентая инфраструктура: что это такое, преимущество, примеры: https://vasexperts.ru/blog/telekom/konvergenciya-i-unifikaciya-neskolko-zadach-na-odnom-ustrojstve/

[27] Интернет-провайдеров обяжут оповещать население о ЧС: https://vasexperts.ru/blog/opoveshhenie-naseleniya-o-chs-novaya-obyazannost-internet-provajdera/

[28] Источник: https://habrahabr.ru/post/340846/?utm_source=habrahabr&utm_medium=rss&utm_campaign=best