लिफ्ट की गणना और सिग्निफिकेंस टेस्टिंग

pandas के साथ मार्केटिंग कैंपेनों का विश्लेषण

Jill Rosok

Data Scientist

कंट्रोल की तुलना में ट्रीटमेंट का प्रदर्शन

लिफ्ट की गणना:

$$ \frac{\text{Treatment conversion rate - Control conversion rate}}{\text{Control conversion rate}} $$

लिफ्ट की गणना

# Calcuate the mean of a and b 
a_mean = np.mean(control)
b_mean = np.mean(personalization)

# Calculate the lift using a_mean and b_mean
lift = (b_mean-a_mean)/a_mean

print("lift:", str(round(lift*100, 2)) + '%')

lift: 194.23%

T-distribution

¹ Identification of Timed Behavior Models for Diagnosis in Production Systems. Scientific Figure on ResearchGate.

P-values

1.96 का T-statistic आमतौर पर 95% स्तर पर स्टैटिस्टिकली सिग्निफिकेंट माना जाता है.
टेस्ट के संदर्भ पर निर्भर है; आप कम या ज़्यादा सिग्निफिकेंस स्तर से भी सहज हो सकते हैं.

Python में T-test

from scipy.stats import ttest_ind

t = ttest_ind(control, personalized)

print(t)

TtestResult(statistic=-2.7343299447505074, 
            pvalue=0.006451487844694175, 
            df=552.0)

अभ्यास करते हैं!

pandas के साथ मार्केटिंग कैंपेनों का विश्लेषण