Tillgänglighet av facit

Övervakning av maskininlärningskoncept

Hakim Elakhrass

Co-founder and CEO of NannyML

Omedelbart facit

En bild på en taxi som relaterar till prediktion av taxiankomsttider.

Mäter faktisk prestanda
Enkel utvärdering
Tillförlitlig

Produktionsdata – omedelbart

Grafen illustrerar ett prestandadiagram för ett klassificeringsproblem, där "referensperioden" representerar testdatasetet och "analysperioden" representerar ett flöde av produktionsdata. Dessutom visas ett tabelldataset med markerade fациtvärden.

Fördröjt facit

En bild på en tom plånbok som relaterar till prediktion av lånebedrägerier.

Fördröjningen beror på tillämpningen
Ett möjligt scenario är prediktion av lånebetalningsproblem
Prestanda är okänd under mellantiden
Kräver prestandauppskattning

Produktionsdata – fördröjt

Frånvarande facit

En bild på en försäkringspolis som relaterar till prissättning av försäkringar.

Förekommer i helautomatiserade processer
Ett möjligt scenario är försäkringsprissättning
Faktisk prestanda är okänd
Kräver prestandauppskattning

Produktionsdata – frånvarande

Nu kör vi en övning!

Övervakning av maskininlärningskoncept