Erros de machine learning

Machine Learning for Business

Karolis Urbonas

Head of Machine Learning & Science, Amazon

Erros

  • Machine learning primeiro
  • Dados insuficientes
  • Definição da variável-alvo
  • Teste tardio, sem impacto
  • Seleção de variáveis
Machine Learning for Business

Machine learning primeiro

pirâmide bruta

Machine Learning for Business

Dados insuficientes

Preparação

Machine Learning for Business

Definição da variável-alvo

  • O que estamos prevendo?
  • Dá pra observar?
    • Churn contratual — cliente cancelou o cartão premium
    • Churn não contratual — cliente passou a usar outro supermercado
  • Análise aprofundada
  • Conhecimento do negócio
Machine Learning for Business

Seleção de variáveis

Inferência (o que afeta a variável-alvo?)

  • Escolha variáveis que você controla (latência do site, preço, entrega, suporte etc.)
  • O negócio precisa participar da seleção de variáveis

$$

Predição (conseguimos estimar o valor futuro da variável-alvo?)

  • Comece com dados já disponíveis
  • Se o desempenho for OK, teste
  • Traga novas variáveis aos poucos
Machine Learning for Business

Teste tardio, sem impacto

teste a/b

Machine Learning for Business

Vamos praticar!

Machine Learning for Business

Preparing Video For Download...