Итоги по A/B тестированию
Глава 1
- Этапы и сценарии A/B тестирования
- Определение и оценка метрик
.sample(), .corr(), pairplot, heatmap
Глава 2
- Формулировка гипотез A/B тестирования
- Уровни ошибок, мощность, размер эффекта
- Анализ мощности: оценка размера выборки
- Поправки на множественные сравнения
Глава 3
- Очистка данных и разведочный анализ
- Проверки работоспособности для валидации
- Анализ различий в долях
proportions_ztest,proportion_confint
Глава 4
- Анализ различий в средних
- Непараметрические тесты
- Дельта-метод для метрик на основе отношений
- Лучшие практики и продвинутые темы