Рубрика «python» - 10

Несколько месяцев назад я начала пробный проект для одной редакции. Хотелось решить довольно бытовую проблему: журналисты тратили слишком много времени не на журналистику, а на обслуживание новостного потока.

Утром нужно открыть несколько источников, найти подходящие темы, проверить, не взял ли новость коллега, сохранить материал, подготовить текст, выбрать рубрику, перенести все в CMS. По отдельности эти действия занимают минуты или секунды. Но когда новостей много, рутина съедает заметную часть рабочего дня.

Читать полностью »

Отчёт confidence-scorer: найден контрпример, score 35/100

Отчёт confidence‑scorer: найден контрпример, score 35/100

Читать полностью »

Обошли краулером свой сайт, получили граф внутренних ссылок, посчитали PageRank. Открыли результат, а там ровная каша: у каждой страницы из меню сто с лишним входящих, у каждой страницы вне меню две. Никакой информации.

Причина очевидная. Меню и подвал стоят на каждой странице, поэтому в графе на каждую страницу из меню ведёт почти столько же рёбер, сколько всего узлов. Редакционные ссылки, те самые, ради которых всё и затевалось, тонут в этом фоне.

Ниже способ отделить одно от другого, не трогая разметку. Он занимает тридцать строк, работает на любом движке и один раз меня обманул. Про то, как именно обманул, тоже будет.

Читать полностью »

Как я обучал YOLO искать патологии на панорамных снимках и обнаружил проблему в датасете

За месяц я собрал MVP системы для анализа панорамных рентгенограмм. Идея была простой: врач загружает снимок, а модель выделяет области, которые стоит изучить внимательнее.

Я не ставил задачу заменить стоматолога. На этом этапе речь шла только о вспомогательном инструменте, который может работать как второе мнение и подсвечивать подозрительные участки на ОПТГ.

Читать полностью »

Робот может написать симфонию?

Робот может написать симфонию?

Полгода назад мне понадобился личный AI помощник (знаю...звучит слишком пафосно и мне самому это словосочетание не нравится) для работы на своем ноутбуке на Windows.
Читать полностью »

Когда я впервые прочитал роман И.Ильфа и Е.Петрова «12 стульев», мне бросилась в глаза только одна скрытая цитата, явно намекающая на библейский сюжет. В эпизоде, где Бендер и Воробьянинов садятся на агитпароход «Сеятель», представляясь художниками, Бендер говорит про Ипполита Матвеевича «Это со мной мальчик». В ответ на удивление «мальчиком» пассажиров агитпарохода, Бендер поясняет: «Кто скажет, что это девочка, пусть первый бросит в меня камень». Здесь авторы романа явно отсылают читателя к прецеденту «Христос и грешница».

Читать полностью »

Сценарий знакомый: открываешь в pandas файл побольше, ноутбук задумывается, вентилятор набирает обороты, и через минуту всё падает с MemoryError. Следом обычно приходит совет от старших коллег или из интернета: pandas для маленьких данных, для больших есть Spark. Мне захотелось проверить этот совет цифрами. Не на кластере в облаке, где Spark чувствует себя как дома, а на машине, которая больше похожа на рабочий ноутбук аналитика.

Читать полностью »

Идея была простая и на вид очевидная: на маркетплейсах Telegram-подарков постоянно появляются лоты дешевле рыночной цены. Купил дешевле, выставил по рынку, забрал разницу. Ботов там, в отличие от криптобирж, почти нет.

Я написал систему, которая две недели непрерывно собирала данные с трёх площадок — Portals, Tonnel и MRKT, — а потом честно проверила эту идею.

Ответ: заработать нельзя. Не «сложно», не «нужно быстрее» — нельзя в принципе, и я могу показать это цифрами. Ниже — как измерял, что получилось и где были ловушки, в которые я сам чуть не попал.

Все данные и код открыты, ссылки в конце.

Что собрано

Шахматы — почти идеальная игра для голосового интерфейса. Состояние компактное, ходов конечное число, правила формальны. Казалось бы, бери и делай.

На практике голосовой навык ломается не о шахматы, а о расшифровку речи. Игрок говорит «пешка е два е четыре», распознавание может вернуть «пешка е два и четыре». Для человека смысл очевиден; навык должен восстановить e2–e4 и при этом не угадывать, если позиция или качество разбора оставляют несколько вариантов.

Ниже — про то, как устроен навык «Шахматы с Юрой» для Яндекс Алисы и какие решения пришлось принять, чтобы игра оставалась играбельной на слух.

Читать полностью »


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js