Glossary

A/B test (yield) क्या है?

Yield A/B test visitors को मौजूदा ad setup और एक बदलाव के बीच random बाँटता है, फिर revenue compare करके बताता है कि बदलाव से सच में फ़ायदा हुआ या नहीं।

Read in English

पहले-और-बाद की तुलना आपके बदलाव को season, ख़बरों और traffic के उतार-चढ़ाव से मिला देती है। A/B test में visitors को random तरीके से बाँटा जाता है, ताकि दोनों groups एक ही दिनों से गुज़रें। जो group मौजूदा setup रखता है, वो control या holdout है; दूसरे group को बदलाव मिलता है, जैसे नया bidder, floor या layout.

शुरू करने से पहले अवधि तय कीजिए और पूरे हफ़्ते चलाइए; नतीजा अच्छा दिखते ही रोक देना एक किस्मत वाला पल चुन लेता है। Google, Ad Manager के manual experiment trials को कम से कम 7 और ज़्यादा से ज़्यादा 31 दिन चलाने को कहता है। पूरी visit को आँकिए: सिर्फ़ CPM नहीं, revenue per 1,000 sessions compare कीजिए, और pages per session और page speed पर नज़र रखिए। दो एक जैसे groups वाला A/A test दिखाता है कि सामान्य शोर कितना बड़ा है।

Demand partners के लिए rollout के बाद भी एक छोटा holdout रखिए। नए SSP का dashboard दिखाता है कि उसने क्या जीता, ये नहीं कि उसने क्या जोड़ा; holdout दिखाता है कि वो पैसा नया था या बस किसी दूसरे bidder से खिसका।

उदाहरण

20% visitors को नया bidder मिलता है और 80% holdout हैं। दो पूरे हफ़्तों बाद test group $10.30 प्रति 1,000 sessions कमाता है और holdout $10.00. Lift है $0.30 ÷ $10.00 = 3%.

Publishers के लिए क्यों ज़रूरी है

सही बँटवारे के बिना आप बदलाव को calendar से अलग नहीं कर सकते। A/B tests आपको बेकार बदलाव रखने, या काम के बदलाव छोड़ने, से बचाते हैं।