A/B-testning

Data Science för verksamheter

Kaelen Medeiros

Data Scientist at Medidata Solutions

Vad är A/B-testning?

a-b-test.png

Data Science för verksamheter

Fallstudie: artikelrubriker

a-b-test-headlines.jpg

Data Science för verksamheter

Steg i A/B-testning

  • Välj ett mått att följa
  • Beräkna urvalsstorlek
  • Kör experimentet
  • Kontrollera signifikansen
Data Science för verksamheter

Välj ett mått att följa

click-on-link.jpg

Data Science för verksamheter

sample-size-percent.jpg

Data Science för verksamheter

sample-size-sensitivity.jpg

Data Science för verksamheter

Kör ditt experiment

run-experiment.jpg

Data Science för verksamheter

Kontrollera signifikansen

significance.jpg

Data Science för verksamheter

Vad händer om resultaten inte är signifikanta?

  • Skillnaden är mindre än det tröskelvärde vi valde
  • Längre testtid hjälper inte
  • En skillnad kan ändå finnas – den är bara liten
Data Science för verksamheter

Nu kör vi en övning!

Data Science för verksamheter

Preparing Video For Download...