Как мы изгоняли наркоторговцев из рунета

в 10:16, , рубрики: crawling, data mining, statoperator, органы государственной власти, Роскомнадзор, управление проектами

Как мы изгоняли наркоторговцев из рунета - 1

Сегодня мне хотелось бы поведать вам историю о том, как мы определяли сайты, торгующие наркотиками в рунете, о масштабах проблемы, об опыте взаимодействия IT компании с Роскомнадзором, депутатами, различными палатами, и почему на это больше не хватает зла.

Все началось со статьи на Хабр в прошлом году, в рамках которой мы сканировали список сайтов запрещенных на территории РФ, составляли по ним частотный словарь, пытались разобраться в том, что по факту происходит в теме регулирования интернета. Интерактивная визуализация словаря и сейчас доступна у нас на сайте, скрин:

Как мы изгоняли наркоторговцев из рунета - 2

Результаты, в какой-то степени, нас даже удивили. Подавляющее большинство блокировок не имели никакого отношения к гонениям неугодных: торговля наркотиками, порнография, азартные игры. Посмотрев на зоны, в которых все это добро располагается, задались целью — избавить зону .ru от наркоторговцев.

Как мы изгоняли наркоторговцев из рунета - 3

Словарь мы доработали с учётом специфики: только нужная тематика, плюс слова, минус слова, определили кучу дополнительных признаков, провели их скоринг, научили систему строить граф связности. В итоге получили инструмент с тонким тематическим классификатором, который запускаясь с кнопки разворачивал кластер, сканировал все существующие домены в зоне .ru, обсчитывал все это, строил визуализацию и генерировал отчет. Вот как это выглядело:

Как мы изгоняли наркоторговцев из рунета - 4
Как мы изгоняли наркоторговцев из рунета - 5

Всё это делалось на собственные средства, без капли грантоедства. На этот раз, результаты, мягко говоря, нас поразили. Более 5000 сайтов, нагло, дерзко, никого не опасаясь, не залезая ни в какие Торы и дарквебы, торговали наркотой прямо в зоне .ru (и сейчас торгуют, доступны без всяких анонимайзеров и VPN), примеры:

Как мы изгоняли наркоторговцев из рунета - 6
Как мы изгоняли наркоторговцев из рунета - 7

Собравшись с мыслями, мы набросали презентаций и вышли на контакт с различными представителями власти. Мы понимали, что люди вряд ли понимают как устроен интернет, разжёвывывали информацию как детям. Боже, мы им придумали меркетинговую стратегию для извлечения политических дивидендов под лозунгом «избавим рунет от наркоторговцев», лишь бы кто-нибудь занялся делом. Мы объясняли, что можно закошмарить зону так, что барыги не будут успевать домены регистрировать, тем более, что не просили ничего взамен, максимум — упоминания нас как компании, способной обходить и анализировать все зарегистрированные домены мира за сутки.

Вы не поверите, но нас кидали. Брали на «тест» ссылки по 100-200 штук, отрабатывал их по своим МВД’шным каналам, извлекали те самые политические дивиденды, сулили какие-то мифические контракты, вот вот сейчас, только дайте еще немного ссылок, и тупо сливали, забывая упоминать компанию даже на закрытых совещаниях. Наши органы, в силу формального процесса блокировки по решению суда, не в состоянии отработать больше 100-200 ссылок в месяц и материала которого мы насыпали политикам хватало для долгосрочного пиара, а о реальной борьбе и речи не шло.

Какого чёрта вы вообще с политиками связались, спросите вы? И я отвечу. На сраной козе (простите) вы не зайдете ни в один высокий кабинет. У нас, во всяком случае, не получилось. Все эти «социальные лифты» от государства, о которых трубят в СМИ, ничего кроме злобы сейчас не вызывают. Мы, правда, пытались что-то изменить в этой стране, провели немало встреч, потратили огромное количество средств и времени, в надежде на то, что кто-нибудь из них зацепится и реально отработает тему, а по итогу мне пришлось сменить страну проживания, чтобы не забили трубами по почкам в подъезде те, кому мы все-таки успели подпортить бизнес.

Сейчас проект закрыт и стартовать его по собственной инициативе мы больше не планируем. Не повторяйте наших ошибок. Ничего, кроме неприятного ощущения, что нас использовали, извлечь из этой ситуации не получилось. Такие дела.

Автор: Иван Гордиенко

Источник

Поделиться

* - обязательные к заполнению поля