A/Bテスト

ビジネスのためのデータサイエンス

Kaelen Medeiros

Data Scientist at Medidata Solutions

A/Bテストとは

A/Bテスト

ビジネスのためのデータサイエンス

ケーススタディ:記事の見出し

記事見出しのA/Bテスト

ビジネスのためのデータサイエンス

A/Bテストの手順

  • 追跡する指標を選定
  • サンプルサイズを計算
  • 実験を実行
  • 有意性を確認
ビジネスのためのデータサイエンス

追跡する指標を選ぶ

リンクのクリック

ビジネスのためのデータサイエンス

サンプルサイズの割合

ビジネスのためのデータサイエンス

サンプルサイズの感度

ビジネスのためのデータサイエンス

実験を実行する

実験を実行

ビジネスのためのデータサイエンス

有意性を確認する

有意性の確認

ビジネスのためのデータサイエンス

結果が有意でない場合は?

  • 差は設定したしきい値未満
  • 実験期間を延ばしても改善しない
  • 差はあるかもしれないが小さい
ビジネスのためのデータサイエンス

練習してみましょう!

ビジネスのためのデータサイエンス

Preparing Video For Download...