Pazarlama için A/B testi

pandas ile Pazarlama Kampanyalarını Analiz Etme

Jill Rosok

Data Scientist

A/B testi nedir?

Testi çalıştırmadan önce belirleyin:

Testin hedef sonucu nedir? Hipotezimiz nedir?
Hangi metriği etkilemek istiyoruz (örn. sayfa görüntüleme, dönüşüm)?
İstatistiksel anlamlılığa zamanında ulaşmak için sitemize yeterli trafik gelecek mi?

Test, pazarlama etkisini anlamamızı sağlar

Bir test ne kadar sürmelidir?

Kişiselleştirilmiş e-posta testi

Test tahsisi

email = marketing[marketing['marketing_channel'] == 'Email']
allocation = email.groupby(['variant'])\
                           ['user_id'].nunique()

allocation.plot(kind='bar')
plt.title('Personalization test allocation')
plt.xticks(rotation = 0)
plt.ylabel('# participants')
plt.show()

Tahsis grafiği

Testi değerlendirmek için verileri hazırlama

# Group by user_id and variant
subscribers = email.groupby(['user_id', 
                             'variant'])['converted'].max()

subscribers = pd.DataFrame(subscribers.unstack(level=1))

Testi değerlendirmek için verileri hazırlama

# Drop missing values from the control column
control = subscribers['control'].dropna()

# Drop missing values from the personalization column
personalization = subscribers['personalization'].dropna()

Dönüşüm oranları

print("Control conversion rate:", 
      np.mean(control))
print("Personalization conversion rate:", 
      np.mean(personalization))

Control conversion rate: 0.2814814814814815
Personalization conversion rate: 0.3908450704225352

Haydi test edelim!

pandas ile Pazarlama Kampanyalarını Analiz Etme