A/B 测试

面向业务的数据科学

Kaelen Medeiros

Data Scientist at Medidata Solutions

什么是 A/B 测试?

A/B 测试示意图.png

面向业务的数据科学

案例:文章标题

案例研究:文章标题.jpg

面向业务的数据科学

A/B 测试步骤

  • 选择跟踪指标
  • 计算样本量
  • 运行实验
  • 检查显著性
面向业务的数据科学

选择跟踪指标

点击链接.jpg

面向业务的数据科学

样本量占比.jpg

面向业务的数据科学

样本量与灵敏度.jpg

面向业务的数据科学

运行实验

运行实验.jpg

面向业务的数据科学

检查统计显著性

统计显著性.jpg

面向业务的数据科学

若结果不显著怎么办?

  • 差异小于选定阈值
  • 延长测试无助于显著性
  • 可能仍有差异,但很小
面向业务的数据科学

让我们练习一下!

面向业务的数据科学

Preparing Video For Download...