Полтора месяца ML‑ансамбль в моей торговой системе показывал на бэктесте AUC 0.78 — солидное число для предсказания движения цены по 15-минутным свечам. В бою та же система в лучшем случае выходила в ноль. Разрыв между «отлично работает на истории» и «ничего не работает в реальности» — самый частый и обманчивый симптом в прикладном ML на временных рядах. Обычно за ним стоит одно из трёх: недообучение на новых условиях, изменившийся рынок или утечка данных.
Рубрика «валидация данных»
Утечка на 3.5 часа вперёд: как модель обманывала саму себя полтора месяца — и как мы это поймали
2026-09-10 в 15:31, admin, рубрики: data leakage, LightGBM, lookahead bias, pandas, resample, time series, алготрейдинг, валидация данныхОшибка в расчёте скидки, которую не видно глазами: проверяем ответ API по документации, когда автотестов нет
2026-08-10 в 7:55, admin, рубрики: elasticsearch, json, валидация данных, логи, проверка ответов, регрессионное тестирование, ручное тестирование, тест-кейсы, тестирование apiЕсть класс ошибок, которые проходят все ручные проверки и спокойно доезжают до продакшена. Не пятисотки, не пустые поля, не сломанная структура — с этим как раз всё в порядке. Речь про случаи, когда сервис отвечает статусом 200, все поля на месте, типы правильные, и при этом одно число посчитано неверно.
Расскажу, как я проверяю такие ответы, когда в команде нет автотестов и в ближайшее время не появится: писать и поддерживать код некому, а сверка ответа с документацией делается глазами. Подход применим в любом инструменте, я просто покажу его на своём рабочем сценарии — создании заказа с расчётом скидки.
Читать полностью »
Как биология и особенности медицинского учета издеваются над программистами
2026-06-24 в 7:05, admin, рубрики: база данных, биология, валидация данных, медицина, медицинские информационные системы, Программирование, разработка по, юридические нюансы
На Хабре есть серия статей, касающаяся заблуждений программистов о, казалось бы, простых вещах: о времени, Читать полностью »
Контрольные суммы ИНН, ОГРН и СНИЛС: разбираем алгоритмы и пишем валидатор на Python
2026-06-11 в 8:46, admin, рубрики: python, валидация данных, инн, контрольная сумма, огрн, снилсУ нас есть форма, куда пользователь вводит ИНН контрагента, а мы по нему идём за данными в ЕГРЮЛ. Если заглянуть в логи такой формы, видно сколько туда прилетает мусора. ИНН из одиннадцати цифр (кто-то добавил лишнюю), номера со срезанными ведущими нулями, ОГРН в поле для ИНН, и классика жанра — две соседние цифры переставлены местами. Каждый такой ввод это поход в чужой API, таймаут, ожидание, и в конце честное «ничего не найдено». А пользователь в этот момент уверен, что сломались мы.
Связывание абстрактных классов со свойствами в python
2026-02-22 в 18:15, admin, рубрики: DRY, property, python, setter, абстрактные классы, Абстрактный класс, валидация данных, наследование в python, ооп, свойствоВ данной статье хочу поделиться своим опытом по абстрактным классам. Думаю это будет полезно как разработчикам, только начинающим свой путь, так и уже имеющим опыт.
В материале можно посмотреть, как изящно связать свойства и абстрактные классы с реализацией принципа DRY .
Для начал кратко пробежимся по определениями и терминам, и далее ответим на вопросы, которые могут логично вытекать из этих определений.
Абстрактные классыЧитать полностью »
Zod-valid. Безопасная валидация API данных
2025-09-16 в 6:16, admin, рубрики: api, TypeScript, zod, валидация, валидация данныхZod-valid — это Typescript библиотека, зависимая от другой известной библиотеки zod, для безопасной валидации API данных. API редко гарантирует идеальные данные: поля могут быть пропущены, типы не совпадать, структуры меняться. Без проверки этих данных приложение рискует вызвать runtime-ошибки или ломать бизнес-логику. Валидировать данные заранее — значит обеспечить предсказуемое поведение и защитить приложение от неожиданных значений.
Но давайте сначала рассмотрим использование стандартных инструментов библиотеки zodЧитать полностью »
XTools-py — универсальные утилиты для Python-разработчиков
2025-08-13 в 6:13, admin, рубрики: DevTools, python, валидация данных, инструменты разработчика, кеширование, работа с датами, шифрованиеЕсли вы когда-либо писали на Python и ловили себя на мысли «Опять писать парсер конфигурации…» или «Где-то у меня был код кеша, надо найти» — эта библиотека для вас.
XTools-py — это набор мощных и удобных инструментов для Python, которые помогают упростить рутинные задачи и ускорить разработку.
Вместо того чтобы тратить время на повторное изобретение велосипеда, вы получаете готовые и проверенные решения.
📦 Установка:
pip install xtools-py
✨ Возможности
-
Find — быстрый поиск и работа с коллекциями данных.
-
Matrix — операции с матрицами.
-
ConfigЧитать полностью »
Валидация тела ответа с помощью JSON-Schema
2025-01-14 в 7:01, admin, рубрики: api, json, Postman, валидация, валидация данных, Ланит, основы автоматизации тестирования, скрипты, тестирование, тестовые данныеТаки здравствуйте. Как вы поняли по названию, сегодня в блоге ЛАНИТ мы продолжим мучить JSON. Располагайтесь поудобнее и поехали вместе выжимать из него очередную порцию полезностей для работы.
В предыдущей статье мы использовали JSON как формат передачи данных и файл для подгрузки тестовых данных. Но это еще не все, что он может нам дать для тестирования API. И да, сегодня мы научимся использовать JSON в качестве шаблона для валидации ответов на запросы.
Валидация форм во Vue.js
2019-03-27 в 6:30, admin, рубрики: javascript, vue, vue.js, vuejs, Блог компании Constanta, валидация данных, валидация форм, Программирование, Разработка веб-сайтовПривет!
Валидация форм — одна из самых важных задач на сайте. Нам приходится валидировать данные на присутствие, на совпадение по паттерну, создавать асинхронные валидации, применять валидации только после снятия фокуса с поля или перед отправкой формы… Порой это становится настоящей головной болью для разработчика.
Vue.js содержит много интересных и необычных подходов к валидации, которые помогут решить ваши проблемы. Обзор под катом!


