Teste A/B

Planejamento de Experimentos em R

Joanne Xiong

Data Scientist

Teste A/B

  • Um experimento controlado com apenas duas variantes de algo, por exemplo:
    • 1 palavra diferente em um e-mail de marketing
    • Botão "comprar" vermelho vs. azul em um site
    • Quantos consumidores clicam para criar conta com dois cabeçalhos de site diferentes?
Planejamento de Experimentos em R

Poder e tamanho de amostra em testes A/B

  • Calcular o tamanho da amostra dado um poder, nível de significância e tamanho de efeito
  • Rodar seu teste A/B até atingir o tamanho da amostra calculado
Planejamento de Experimentos em R

Teste A/B do Lending Club

página inicial falsa do lending club, uma com cabeçalho azul e outra com verde

Planejamento de Experimentos em R

Vamos praticar!

Planejamento de Experimentos em R

Preparing Video For Download...