Test A/B

Data Science per il Business

Kaelen Medeiros

Data Scientist at Medidata Solutions

Che cos'è il test A/B?

Caso di studio: titoli di articoli

Fasi del test A/B

• Scegliere una metrica da monitorare
• Calcolare la dimensione del campione
• Eseguire l'esperimento
• Verificare la significatività

Scegli una metrica da monitorare

Esegui l'esperimento

Verifica la significatività

E se i risultati non sono significativi?

• La differenza è sotto la soglia scelta
• Tenere il test attivo più a lungo non aiuterà
• Una differenza può esserci, ma è piccola

Esercitiamoci!

Data Science per il Business