A/B-тестування

Data Science для бізнесу

Kaelen Medeiros

Data Scientist at Medidata Solutions

Що таке A/B-тестування?

Кейс: заголовки статей

Кроки A/B-тестування

• Вибір метрики для відстеження
• Розрахунок розміру вибірки
• Запуск експерименту
• Перевірка значущості

Виберіть метрику для відстеження

Запустіть експеримент

Перевірте значущість

Що, якщо результати незначущі?

• Різниця менша за вибраний поріг
• Довше тестувати не допоможе
• Різниця може бути, але вона мала

Давайте потренуємось!

Data Science для бізнесу