- PVSM.RU - https://www.pvsm.ru -
Привет.
Мы уже писали [1], как нетривиально оказалось получить доступ к списку запрещенных материалов Роскомнадзора, для организации автоматического мониторинга попадения наших сетей и сайтов наших клиентов на предмет блокировки. К сожалению, история с наступанием на многочисленные грабли имеет продолжение, поэтому мы хотели бы поделиться ей. Описанная информация будет в первую очередь полезна операторам связи, которые как мы отслеживают ситуацию попадения ресурсов в список Роскомнадзора.
Итак, запустив в ноябре автоматический мониторинг, мы стали ждать часа Х — появления клиентского ресурса в списке. С одной стороны, конечно, приятного в том, что необходимо в спешке связываться с клиентом и решать вопрос об удалении блокируемой информации, мало, тем более, что на реакцию, напомним, даются 1 сутки, о чем написано в памятке оператору связи [2], с другой стороны, все тесты, которые до этого проводились — были так или иначе синтетические, и разработчик внутри с нетерпеньем ждал, когда автоматика сработает на реальных данных, радостно оповещая всеми возможными способами техническую поддержку и аминистраторов. Ведь как приятно (разработчикам, а не админам) видеть в логах информацию о том, что сервер упал, но дублирующий — вытянул на себе нагрузку, что мастер-база отвалилась, но реплика ее заместила, и т.д. Словом, было просто интересно увидеть систему в действии.
И вот, 27 декабря нам на электронную почту приходит сообщение от Роскомнадзора, что страница нашего клиента — сайта www.tourister.ru [3] попала в злосчастный список. Дело в том, что Туристер.ру — это такая социальная сеть для туристов, где люди размещают обзоры, отзывы и лайфхаки о различных поездках. И в заблокированной статье рассказывалось как правильно съездить в Амстердам и какую траву там стоит покупать. Стоит заметить, что причина блокировки вполне понятна и особых вопросов не вызывает, поэтому мы оперативно связались с администрацией ресурса и в итоге статья была удалена. Казалось бы все, хеппи энд, но нас насторожил один момент — наш мониторинг запрещенных ресурсов за все это время никак на эту ситуацию не отреагировал. Т.е. в штатном расписании в наш хелпдеск приходили отчеты об очередном свежезагруженном дампе, но информации о том, что заблокирован tourister.ru не было:
Разумеется такой порядок вещей нас сильно насторожил и мы стали проверять скачанные дампы, т.к. специально на случай подобной ситуации ведем историю загруженных баз.
Кстати, о дампах хотелось бы отдельно заметить одну интересную особенность. Как известно, сайт zapret-info.gov.ru предоставляет RPC-интерфейс для выгрузки базы реестра. В документации [4] объявлено 3 метода:
Сооственно юзкейс предполагается следующий:
Его мы и реализовали, но довольно быстро мы заметили, что каждый отчет о мониторинге содержит свежескачанный дамп, при этом размер файла и количество содержащихся документов остаются неизменными. Быстрый прогон файлов через diff-tool показал, что файлы различаются только значением таймстемпа. По сути, дата последней выгрузки — это значение текущего времени, с отброшенными минутами и секундами. В результате вся идея об экономии траффика и ресурсов просто не работает.
Так вот, просмотрев все дампы за последние несколько суток мы пришли к выводу, что в них просто остуствует запись о блокировке страницы на tourister.ru:
При этом веб-интерфейс zapret-info [5] исправно выдает информацию о блокировке:
Мы, конечно, написали письмо с вопросами на zapret-info@rsoc.ru [6], но пока ответа не получили.
В качестве вывода хотелось бы процитировать самих себя, из предыдущей статьи по теме:
Иногда задача, связанная с работой с государственными структурами, может заступориться в совершенно неожиданном месте.
Так что, уважаемые операторы связи, будьте бдительны.
UPD: В комментариях заместитель руководителя Роскомнадзора Ксензов Максим Юрьевич, Ksenzov [7], отвечает на вопросы [8] связанные с работой zapret-info. Внимание хабрапользователей, давайте не будем минусовать Ksenzov [7] просто за то, что он представитель организации, ведущий ненавистный тут всем реестр, ибо тогда мы лишимся возможности услышать ответы и комментарии с «другой стороны».
Автор: wronglink
Источник [9]
Сайт-источник PVSM.RU: https://www.pvsm.ru
Путь до страницы источника: https://www.pvsm.ru/hosting/24054
Ссылки в тексте:
[1] уже писали: http://habrahabr.ru/post/158891/
[2] в памятке оператору связи: http://zapret-info.gov.ru/tooperators/
[3] www.tourister.ru: http://www.tourister.ru/
[4] В документации: http://www.zapret-info.gov.ru/docs/description_for_operators_2012-11-09v1.4.pdf
[5] zapret-info: http://zapret-info.gov.ru/
[6] zapret-info@rsoc.ru: mailto:zapret-info@rsoc.ru
[7] Ksenzov: http://habrahabr.ru/users/ksenzov/
[8] отвечает на вопросы: http://habrahabr.ru/post/164329/#comment_5671489
[9] Источник: http://habrahabr.ru/post/164329/
Нажмите здесь для печати.