Monitorování modelů strojového učení
MLOps Concepts
Folkert Stijnman
ML Engineer
Monitorování a přetrénování
Monitorování
Typy monitorování
Statistické monitorování: zaměřuje se na vstupní a výstupní data včetně predikcí
Příklady: zákazník X má 72% pravděpodobnost odchodu, zákazník Y má 31% pravděpodobnost, že neodejde
Typy monitorování
Výpočetní monitorování: zaměřuje se na technické metriky
Příklady: využití CPU serveru, počet příchozích požadavků, počet predikcí, výpadky serveru
Statistické a výpočetní monitorování
Zpětná vazba
Zpětná vazba: proces, při němž se skutečné výsledky využívají ke zlepšení modelu strojového učení
Monitorování v produkci
