if roc_auc < 0.85: exit 1Читать полностью »
Рубрика «валидация моделей»
Зелёный пайплайн ничего не доказывает. Семь способов, которыми quality gate пропускает брак в прод
2026-10-02 в 9:01, admin, рубрики: ci, devops, mlops, quality gate, QualityGates, ruvds_статьи, валидация моделей, качество кода, машинное обучение, тестирование
LLM-судье нельзя верить на слово: как построить надёжный гейт и проверить сами тесты
2026-07-24 в 9:57, admin, рубрики: llm, LLM-as-a-judge, LLMOps, python, архитектура систем, валидация моделей, каппа Коэна, качество данных, тестированиеВ одном из проектов я строил систему оценки ответов с двумя контурами. Первый был скучным и предсказуемым: нормализовать результат и сравнить его с эталоном. Второй использовал LLM как судью и оценивал смысл ответа целиком.
Каппа КоэнаЧитать полностью »