A/B-Tests

Datenwissenschaft für Unternehmen

Kaelen Medeiros

Data Scientist at Medidata Solutions

Was sind A/B-Tests?

a-b-test.png

Datenwissenschaft für Unternehmen

Fallstudie: Artikelüberschriften

a-b-test-headlines.jpg

Datenwissenschaft für Unternehmen

A/B-Test-Schritte

  • Metrik zum Tracken wählen
  • Stichprobengröße berechnen
  • Experiment durchführen
  • Auf Signifikanz prüfen
Datenwissenschaft für Unternehmen

Metrik zum Tracken wählen

click-on-link.jpg

Datenwissenschaft für Unternehmen

sample-size-percent.jpg

Datenwissenschaft für Unternehmen

sample-size-sensitivity.jpg

Datenwissenschaft für Unternehmen

Experiment durchführen

run-experiment.jpg

Datenwissenschaft für Unternehmen

Auf Signifikanz prüfen

significance.jpg

Datenwissenschaft für Unternehmen

Was, wenn die Ergebnisse nicht signifikant sind?

  • Unterschied ist kleiner als unser gewählter Schwellenwert
  • Länger testen bringt nichts
  • Es gibt evtl. einen Unterschied; er ist nur klein
Datenwissenschaft für Unternehmen

Lass uns üben!

Datenwissenschaft für Unternehmen

Preparing Video For Download...