Monitorando modelos de machine learning

Conceitos de MLOps

Folkert Stijnman

ML Engineer

Monitoramento e reentrenamento

Fases de monitoramento e reentrenamento

Machine learning em produção

Machine learning em produção estatístico

Monitoramento estatístico: foca nos dados de entrada e saída, incluindo previsões

Exemplos: cliente X tem 72% de chance de churn; cliente Y tem 31% de chance de não churn

Machine learning em produção computacional

Monitoramento computacional: foca em métricas técnicas

Exemplos: uso de CPU do servidor, número de requisições, número de previsões, tempo de inatividade do servidor

Eletrodomésticos de cozinha

Louças de cozinha

Feedback de monitoramento estatístico

Ciclo de feedback: processo em que a verdade de base é usada para melhorar o modelo de machine learning

Machine learning em produção

Conceitos de MLOps