Посты-рекордсмены

На Хабре я недавно (чуть меньше месяца), до этого Хабр практически не читал. Пришёл, огляделся, походил по тематическим «хабам», почитал «Лучшее за всё время», просмотрел статьи отдельных, заинтересовавших меня персонажей и понял, что для того, чтобы получше понять, как живёт и чем дышит это замечательное сообщество, мне придётся Хабр распарсить и позадавать ему разные вопросы. К тому же, раз уж в своих статьях я писал в основном об автореферентности в разных её проявлениях, как не написать на Хабре статью о Хабре?

Посмотрю, интересно ли это всё кому-либо кроме меня. Если интересно, напишу ещё несколько постов, идей и материала для этого более чем достаточно.

Если я ничего не пропустил в интерфейсе сайта, единственные списки самых-самых, которые можно посмотреть — это общий рейтинг пользователей и список статей, т.н. «Лучшее за всё время». Оба списка отсортированы по рейтингу (пользователей и статей, соответственно). Между тем, существует ещё куча параметров, по которым было бы интересно всё отранжировать.

Самые «полезные» статьи. Статьи, которые максимальное кол-во читателей добавило в «избранное».

Статьи, собравшие максимальное кол-во комментариев.

Антирейтинг. Худшее за всё время. Это тоже интересно. Это не скучные, неинтересные статьи, не получившие высокий рейтинг. Это статьи, нашедшие живейший отклик в умах и сердцах обитателей Хабра. Правда отрицательный.

Интересно было, есть ли на Хабре статьи с высоким рейтингом без единого отрицательного голоса. Что надо написать, чтобы ни у одного, даже самого злобного, тролля не поднялась лапка нажать на минус? Предположил, что без фотографий котят тут не обойтись. Ошибся.

На относительно небольшом кол-ве статей мой написаный на коленке парсер упал, я решил, что вышеприведённые списки это не сильно изменит. Потом пройду отдельно эти статьи и выложу все результаты как таблицу в формате csv, для самостоятельных изысканий читателей.

Мысли и идеи
1) Ещё несколько рейтингов вроде вышеприведённых
2) Нормализация рейтинга. Рейтинг статьи в 2006ом году совсем не то же самое, что аналогичный рейтинг в 2013ом. К сожалению, параметр «кол-во просмотров» был на Хабре не всегда, тут придётся что-нибудь изобретать, например учитывать кол-во пользователей, зарегестрированных на момент написания статьи. Ну и пересмотреть топ после такой нормализации.
3) Частотный словарь Хабра и сравнение его с другими частотными словарями, например Википедии. А так же интересно сравнить лексику статей с лексикой комментариев.
4) Использовать Хабр как материал для генератора марковских цепочек, автоматическая генерация «статей» и «комментариев».
5) Попробовать поучить какой-нибудь байесовский спам-фильтр отличать «хорошие» статьи от «плохих». В успехе подобного мероприятия сильно сомневаюсь, т.к. надеюсь, что для оценки имеет значение смысл статьи, а не только слова её составляющие. Но мало ли.
6) Корелляции всякие поискать. между всем и всем.
7) Восемь троллей — вымысел или реальность?
8) Самые-самые — это замечательно, а как насчёт «самые средние», что такое типичный пост на ХабраХабр?
9) Наименее интересно, но тоже можно сделать. Для любителей… гхм… помедитировать на рейтинг и карму. Что из себя представляют эти цифры? Какой процент статей имеет более высокий рейтинг чем моя замечательная статья? У какого процента пользователей карма длинее и толще чем у меня? Графики красивые можно нарисовать, разумеется. Ещё из той же серии — как будет выглядеть общий рейтинг, если те, кто в нём не участвуют (сотрудники Хабра) вдруг решат участвовать? Как будет выглядеть рейтинг, если убрать пессимизацию и начать учитывать былые заслуги?

P.S. Не уверен, что поставил в правильный хаб, но ничего более подходящего не нашёл.

Автор: gromozeka1980

Источник ^[81]

Сайт-источник PVSM.RU: https://www.pvsm.ru

Путь до страницы источника: https://www.pvsm.ru/parsing/41730

Ссылки в тексте:

[1] 27+ ресурсов для онлайн-обучения / Хабрахабр: http://habrahabr.ru/post/156241/

[2] Памятка пользователям ssh / Хабрахабр: http://habrahabr.ru/post/122445/

[3] Жизнь разработчика (в картинках) / Хабрахабр: http://habrahabr.ru/post/171469/

[4] 20 вещей, которые я должен был знать в 20 лет / Хабрахабр: http://habrahabr.ru/post/147647/

[5] Прекратите скручивать! / Хабрахабр: http://habrahabr.ru/post/157947/

[6] Подборка инструментов для фронт-энд разработки / Хабрахабр: http://habrahabr.ru/post/162283/

[7] Подборка полезного для любителей Twitter Bootstrap / Хабрахабр: http://habrahabr.ru/post/154687/

[8] Несколько полезных сервисов / Хабрахабр: http://habrahabr.ru/post/131581/

[9] Сети для самых маленьких. Часть нулевая. Планирование / Хабрахабр: http://habrahabr.ru/post/134892/

[10] Принцип цикады и почему он важен для веб-дизайнеров / Хабрахабр: http://habrahabr.ru/post/117160/

[11] Руководство по оформлению HTML/CSS кода от Google / Хабрахабр: http://habrahabr.ru/post/143452/

[12] Делаем приватный монитор из старого LCD монитора / Хабрахабр: http://habrahabr.ru/post/133473/

[13] Взломать Wi-Fi за 10 часов / Блог компании Журнал Хакер / Хабрахабр: http://habrahabr.ru/post/143834/

[14] Подборка инструментов для эффективной frontend разработки / Хабрахабр: http://habrahabr.ru/post/156291/

[15] Топ-5 самых впечатляющих книг, которые должен прочесть каждый разработчик ПО / Хабрахабр: http://habrahabr.ru/post/135897/

[16] Спать мало, но правильно? / Хабрахабр: http://habrahabr.ru/post/82641/

[17] Хочешь быть iOS разработчиком? Будь им! / Хабрахабр: http://habrahabr.ru/post/149090/

[18] Лекториум записал почти тысячу лекций за год / Хабрахабр: http://habrahabr.ru/post/136558/

[19] Онлайн-инструменты для кодеров / Хабрахабр: http://habrahabr.ru/post/159999/

[20] Ускорение загрузки Windows for fun and profit / Хабрахабр: http://habrahabr.ru/post/106684/

[21] Как раздавать инвайты на Google+ / Хабрахабр: http://habrahabr.ru/post/123157/

[22] Hello, world! / Блог компании Тематические Медиа / Хабрахабр: http://habrahabr.ru/post/39689/

[23] Лучшие компьютерные игры всех времен и народов по версии хабрасообщества 2013 года / Хабрахабр: http://habrahabr.ru/post/171853/

[24] Раздача слонов или инвайты на Google+ / Хабрахабр: http://habrahabr.ru/post/123122/

[25] Ещё +2Гб для вашего DropBox аккаунта. На сей раз, промо-акция DropBox и Three.com.hk / Хабрахабр: http://habrahabr.ru/post/138291/

[26] Праздничная раздача инвайтов! / Хабрахабр: http://habrahabr.ru/post/58680/

[27] Первая версия Opera 15 для компьютеров / Блог компании Opera Software ASA / Хабрахабр: http://habrahabr.ru/post/181181/

[28] Инвайты на Google Wave / Хабрахабр: http://habrahabr.ru/post/73581/

[29] Зачем нужны попы в ВУЗе? / Хабрахабр: http://habrahabr.ru/post/155041/

[30] Чего вам не хватает для полного перехода с windows на linux? / Хабрахабр: http://habrahabr.ru/post/115365/

[31] Инвайты на Турбофильм! / Хабрахабр: http://habrahabr.ru/post/79804/

[32] Антивирус Бабушкина / Хабрахабр: http://habrahabr.ru/post/170487/

[33] Хабракамп / Хабрахабр: http://habrahabr.ru/post/148795/

[34] Demonoid.Com / Хабрахабр: http://habrahabr.ru/post/23583/

[35] О том, что сегодня произошло с «аськой» (часть 1-я) / Хабрахабр: http://habrahabr.ru/post/49778/

[36] Роскомнадзор признаёт хентай детским порно, призывает к подаче жалоб, обещает пополнение реестра запрещённых ресурсов в Интернете / Хабрахабр: http://habrahabr.ru/post/183304/

[37] 300 миллионов пользователей и переход на WebKit / Блог компании Opera Software ASA / Хабрахабр: http://habrahabr.ru/post/169239/

[38] Какой язык программирования должен быть первым при изучении в школе? / Хабрахабр: http://habrahabr.ru/post/136272/

[39] Планируете ли вы навсегда уехать из России раньше 2017 года? / Хабрахабр: http://habrahabr.ru/post/177875/

[40] Апрельский фуршет / Хабрахабр: http://habrahabr.ru/post/58132/

[41] Bolgenos — это не просто очередная сборка «Линукса» / Хабрахабр: http://habrahabr.ru/post/95087/

[42] Галерея безобразных скайп-аватар / Хабрахабр: http://habrahabr.ru/post/163963/

[43] Лебедев лежит! / Хабрахабр: http://habrahabr.ru/post/83725/

[44] Хочу спалить идею стартапа (1) / Хабрахабр: http://habrahabr.ru/post/80600/

[45] Lostfilm закрыт / Хабрахабр: http://habrahabr.ru/post/97059/

[46] 10000$ на рейтинг вконтакте / Хабрахабр: http://habrahabr.ru/post/72707/

[47] Мой гвоздь в крышку гроба Windows / Хабрахабр: http://habrahabr.ru/post/180123/

[48] С Дыднём Йожа тащемта / Хабрахабр: http://habrahabr.ru/post/78966/

[49] Моя кошка / Хабрахабр: http://habrahabr.ru/post/76942/

[50] Счас меня заберут мусора / Хабрахабр: http://habrahabr.ru/post/88295/

[51] FreeLove / Хабрахабр: http://habrahabr.ru/post/39523/

[52] Я, как сознательный %username%, ставлю минусы за… / Хабрахабр: http://habrahabr.ru/post/96893/

[53] «ВКонтакте все украл у Facebook»: надоевший миф / Хабрахабр: http://habrahabr.ru/post/108661/

[54] Это сделало мой день. Смотреть до конца. Чувак в неадеквате / Хабрахабр: http://habrahabr.ru/post/76576/

[55] ДААААА / Хабрахабр: http://habrahabr.ru/post/37713/

[56] Изготовление мебели для кафе бара и ресторана / Хабрахабр: http://habrahabr.ru/post/72864/

[57] Люди-икс круче тебя, %username%. А сам %username% круче всех людей-игрек. %username%+x+y=все. / Хабрахабр: http://habrahabr.ru/post/93044/

[58] Оригинальный дизайн / Хабрахабр: http://habrahabr.ru/post/95848/

[59] Лого вконтакте / Хабрахабр: http://habrahabr.ru/post/136842/

[60] c:ls.bat / Хабрахабр: http://habrahabr.ru/post/53335/

[61] Физика радиационных эффектов, влияющих на электронику в космосе / Хабрахабр: http://habrahabr.ru/post/189066/

[62] DNS Amplification (DNS усиление) / Хабрахабр: http://habrahabr.ru/post/51574/

[63] Headtracking или как увидеть трехмерный чайник на двухмерном мониторе / Хабрахабр: http://habrahabr.ru/post/126290/

[64] Обзор мозгокомпьютерного интерфейса Emotiv Epoc / Хабрахабр: http://habrahabr.ru/post/115055/

[65] Электронный поводырь для слепых «Электросонар» / Хабрахабр: http://habrahabr.ru/post/173751/

[66] Первое мероприятие по 3D печати в Нидерландах / Хабрахабр: http://habrahabr.ru/post/131460/

[67] Неизбежность нодокалипсиса / Хабрахабр: http://habrahabr.ru/post/169993/

[68] Обнаружение устойчивых признаков изображения: метод SURF / Хабрахабр: http://habrahabr.ru/post/103107/

[69] Изображения: форматы и сжатие (2/3) / Блог компании TradingView / Хабрахабр: http://habrahabr.ru/post/184660/

[70] CSRF на vkontakte.ru / Хабрахабр: http://habrahabr.ru/post/21626/

[71] Хемилюминесценция люминола / что внутри «светящихся палочек»? / Хабрахабр: http://habrahabr.ru/post/184796/

[72] Pionen — Подземный дата центр / Хабрахабр: http://habrahabr.ru/post/44845/

[73] Взлом хеш-функций (2004-2006 гг.): как это было и что теперь делать? / Хабрахабр: http://habrahabr.ru/post/50434/

[74] Миникомпьютер из роутера с OpenWRT: пишем драйвер фреймбуфера / Хабрахабр: http://habrahabr.ru/post/164635/

[75] Применение процедурных генераторов в создании контента для real-time 3D приложений: Часть 2. Valley Benchmark / Блог компании UNIGINE / Хабрахабр: http://habrahabr.ru/post/184614/

[76] Как работает беспилотный автомобиль «Гугла» / Хабрахабр: http://habrahabr.ru/post/143478/

[77] ZX-Art: крупнейшая коллекция графики для ZX-Spectrum / Хабрахабр: http://habrahabr.ru/post/131042/

[78] “DVD-Йон” затеял социальную сеть на пиратском контенте / Хабрахабр: http://habrahabr.ru/post/20538/

[79] Видеохостинг своими руками / Хабрахабр: http://habrahabr.ru/post/111249/

[80] Возвращаемся на раздачу или как сделать невозможное / Хабрахабр: http://habrahabr.ru/post/150608/

[81] Источник: http://habrahabr.ru/post/191268/

Нажмите здесь для печати.