Рубрика «открытые данные» - 31

image

В контексте последних законов, событий и тенденций как никогда очевидна ценность рутрекера как базы данных различного контента, а не как конкретного ресурса. К сожалению все мои призывы к администрации рутрекера предоставить общедоступный, полный, удобный дамп их базы наткнулся на полное непонимание с их стороны. Выкладывать нечто, что они называют зашифрованной «базой» — я не считаю решением проблемы по причинам, изложенным в вышеприведенных ветках обсуждения и продублированным ниже.

К сожалению, решить проблему своими силами у меня не хватило ни времени, ни, будем откровенны, знаний. Но к счастью, мои слова возымели действие на людей, которые и тем и другим обладают. В итоге эти люди организовались и сообща сделали то, о чём так долго говорили большевики о чем я писал, а именно с помощью скриптов обошли рутрекер, сдампили все описания раздач с хешами, распарсили их и скомпоновали в удобную для употребления базу. В дополнение к этому так же была написана «морда»: программа для удобной работы с базой конечных пользователей, не знающих с какого конца держат grep. К сожалению, аккаунта на хабре никто из этой команды не имеет (если не считать read-only), в песочнице статья могла бы потеряться, поэтому меня выбрали как рупор для данной площадки. Я, честно говоря, раздумывал совсем недолго и только над тем, как правильнее все сделать. Если будут какие-то вопросы — задавайте мне в комментах, я либо отвечу сам, либо переадресую разработчикам. Технические тексты от первого лица, но я имею к ним косвенное отношение, они оставлены в таком виде для простоты восприятия.

Прежде, чем перейти к технической части и ссылкам, хотел бы добавить, что весь смысл этой затеи в том, чтобы как можно больше людей сохранили эту базу к себе. Поэтому очень Вас прошу, скачать данные по ссылкам ниже (желательно использовать торрент) и оставаться на раздаче как можно дольше. Скорее всего в будущем база будет обновляться, но этот момент еще не продуман до конца.

Читать полностью »

Возможно вы знаете в России действует Совет по открытым данным при Правительственной комиссии по координации деятельности Открытого правительства.

Что такое совет по открытым данным

Это такой орган при правительстве на заседаниях которого обсуждают всевозможные аспекты открытых данных как то:

  • министерства отчитываются об открытии данных;
  • все органы власти согласуют и озвучивают свою позицию по открытости;
  • обсуждается открытие ключевых массивов данных;
  • +масса других вопросов: открытые лицензии, ТЗ на единый портал открытых данных, стандарты и форматы и многое другое

Я никак не могу похвастаться что работа в советах — это очень интересное занятие. Больше половины участников — это представители госорганов и около государственных учреждений. Собственно я думаю что я там один из немногих из участков кто там из ИТ отрасли, умеет программировать и из некоммерческого сектора одновременно (я возглавляю НП «Информационная культура»).
Может быть именно по этой причине я там и больше всех говорю про то что такое открытые данные на самом деле.

Однако, несмотря на то что все эти заседания весьма утомительны, я не могу сказать что они бесполезны. Многие из российских госорганов открыли немало данных, пусть пока и не самых полезных.

Почти всё это происходит на федеральном уровне. И есть закономерный вопрос, а что в регионах? А в регионах вот что.

А что же в регионах?

Читать полностью »

Вы наверняка знаете что сейчас идет, заканчивается и начинается много соревнований по открытым данным и многие проводят хакатоны.

Например, Хакатон Яндекса пройдет завтра-послезавтра и еще не поздно зарегистрироваться, наши друзья в Санкт-Петербурге проводят свой Хакатон 5-6 октября.

Читать полностью »

14 — 15 сентября в Москве пройдёт первый Хакатон Яндекса, участники которого будут два дня и две ночи создавать проекты на основе открытых государственных данных с помощью технологий Яндекса.

Я уже много лет занимаюсь тем, чтобы у российских разработчиков рос интерес к работе с открытыми данными. Именно для этого создан конкурс Apps4Russia, организованный некоммерческим партнерством «Информационная культура». В этом году в нем появилась номинация для тех, кто создает приложения на отрытых данных и технологиях Яндекса. Эти события подтолкнули систематизированно рассказать здесь об истории открытых данных, их источниках, примерах использования и многих других важных вещах.

image

То, что сейчас мы можем узнать подробные результаты выборов по каждому участку, — это норма, а еще совсем недавно это было не так даже в очень развитых странах.
Читать полностью »

Какое-то время назад я столкнулся в социальной сети с подобной голосовалкой. Суть ее была в том, что люди, заранее не видя распределения процентов, выбирали тот или иной пункт, но в результате каким-то магическим образом распределение голосов было равно указанному.

С тех пор меня интересует вопрос — была ли это просто накрутка голосов или же тут работает какая-то психология?

В общем, вот вам голосовалка. Голосуйте за любой пункт и смотрите результаты.

PS: Вопрос и порядок ответа скопировал с оригинала.

Читать полностью »

20 сентября в 19.00 в кафе «Циферблат» на Пушкинской состоится митап на тему «Открытые данные и геотехнологии».

Максим Дубинин, один из создателей независимого информационного ресурса о геоинформационных системах GIS-Lab, поделиться своим опытом использования открытых данных в области геотехнологий и расскажет про реализованные общественные проекты ГИС-лаборатории.

На встрече вы узнаете:

Что такое геоинформационные технологии;
Где взять открытые данные и инструменты для проектов, использующих карты;
Что интересного происходит в мире геоинформатики.

Читать полностью »

Коллеги,
на днях представители Минэкономразвития разместили проект технических требований на общероссийский портал открытых данных.

И собирают замечания и комментарии к данному документу.
С документом можно ознакомиться вот здесь — docs.google.com/document/d/1_V7zqj_UmSc-OpDuSbfEtzSiuVAIkzr7QfLCWINdZrI/edit
и там же оставить свои комментарии.

Я же сделаю акцент на нескольких слабых моментах:

1. Опытная эксплуатация должна проводиться в течение 2 дней.

Сведения должны быть зафиксированы в журнале с указанием даты и ответственного лица. В ходе проведения опытной эксплуатации Исполнителем должны быть извещены все категории пользователей системы о возможности использования новых функциональных модулей системы и обеспечена возможность фиксирования возможных недостатков и замечаний функционирования при помощи инструмента «обратной связи». Опытная эксплуатация должна проводиться в течение 2 дней.

Фактически это означает что никакой опытной эксплуатации не будет. 2 дня — это что-то другое.

2. Работы за 14 календарных дней
Читать полностью »

Сегодня, в 13.00 в здании Дома Правительства начнется заседание экспертной рабочей группы федерального уровня, посвященное рассмотрению первой петиции, набравшей необходимые 100 тысяч подписей на портале “РОИ”:

“Запрет чиновникам и сотрудникам компаний с государственным (муниципальным) участием приобретать легковые автомобили стоимостью свыше 1.5 миллионов рублей.”

image

Данная петиция была подана Алексеем Навальным, недавним кандидатом на пост мэра г.Москвы и еще 10 июля собрала необходимое количество голосов. Но рассмотрена будет в последний день, когда эксперты по регламенту обязаны будут дать решение по сути инициативы. Ведь, в соответствии с Указом Президента РФ от 4 марта 2013 г. N 183 «О рассмотрении общественных инициатив, направленных гражданами Российской Федерации с использованием интернет-ресурса „Российская общественная инициатива“, рабочая группа должна подготовить экспертное заключение в срок, не превышающий 2 месяца со дня окончания сбора подписей.

Таким образом именно сегодня решится судьба первой петиции, прошедшей все необходимые процедуры и регламенты.
Во многом от результата обсуждения и итогового решения экспертов будет зависеть восприятие обществом как самого портала РОИ, так и института общественных инициатив в нашей стране.
Насколько важным и актуальным для государства окажется мнение интернет-общественности, которое высказалось и набрало необходимое число голосов на представленным самим государством площадке? Читать полностью »

Используем почтовые индексы в своём приложении во благоЯ думаю, что на многих сайтах пользователя спросят его физический адрес. Для доставки ли, для отсылки бумажного спама уведомлений ли. И, в общем-то — это мелочь. Вбил индекс, Москва, область, район, село, улица, дом, квартира. Казалось бы, что тут упрощать, каждый вроде помнит свой адрес, трудно ли его вбить? Но дьявол, как всегда, кроется в мелочах: пользователь опечатывается в адресе, посылка уходит не туда, лучи «добра» идут вам в обратную связь и вообще жизнь плохеет.

Приглядитесь к первой части адреса — индексу. В этом наборе из шести цифр уже есть область, район и город/село. Их можно подставить автоматом. Этим мы убъём сразу двух зайцев:

  • Убережём пользователя от ошибок (при вводе неверного индекса он сразу заметит, что город-то не его), что, в случае доставки письма (а то и посылки), может здорово её ускорить (пока её по неверному индексу зашлют, да пока разберутся, что не туда заслали, да отправят туда — пользователь вам всю плешь проест)
  • пользователю будет приятно, что о нём заботятся :-)

Дело за малым: нам нужна база почтовых индексов.

И она есть! Всамделишняя, электронная и, главное, официальная база индексов от Почты России.
Читать полностью »

Университет MIT выложил бесплатно лекции в Сеть

Один из лучших технологических вузов мира опубликовал большинство своих обучающих курсов, лекций и семинаров в интернете на отдельном ресурсе.

Есть аудио и видео-курсы, поиск по каталогу, по номеру курса, по наименованию дисциплины, все предметы и степень сложности разделены в отдельные рубрики.Читать полностью »


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js