Мониторинг моделей машинного обучения
Концепции MLOps
Folkert Stijnman
ML Engineer
Мониторинг и переобучение
Мониторинг
Виды мониторинга
Статистический мониторинг: анализирует входные и выходные данные, включая предсказания
Примеры: вероятность оттока клиента X — 72%, клиента Y — 31%
Виды мониторинга
Вычислительный мониторинг: анализирует технические метрики
Примеры: загрузка CPU сервера, число входящих запросов, число предсказаний, время простоя
Статистический и вычислительный мониторинг
Петля обратной связи
Петля обратной связи: процесс, при котором истинные метки используются для улучшения модели машинного обучения
Мониторинг в продакшне
