A/Bテスト

Rで学ぶ実験計画法

Joanne Xiong

Data Scientist

A/Bテスト

• 2つのバリアントを比較する対照実験の一種。例：
  • マーケティングメールの1単語の違い
  • ウェブサイトの「購入」ボタンの色（赤vs青）
  • 2種類のヘッダーによるアカウント登録のクリック率

A/Bテストにおける検出力とサンプルサイズ

• 検出力・有意水準・効果量からサンプルサイズを算出する
• 算出したサンプルサイズに達するまでA/Bテストを実施する

Lending Club A/Bテスト

では、練習しましょう！

Rで学ぶ実験計画法