चरण 6 में से 6
मापें और सीखें
अगला परीक्षण क्या है, और कौन-सा नतीजा निर्णय बदलेगा?
परीक्षण तभी उपयोगी है जब नतीजा आने से पहले निर्णय का नियम लिखा हो। यह अगला प्रस्तावित कदम है, पूरा किया गया प्रयोग नहीं।
काम · सवाल, रूपरेखा, डेटा और निर्णय का नियम
अगले परीक्षण का कार्ड
एक सवाल, एक रूपरेखा और एक नियम। बाद में नई व्याख्या गढ़े बिना टीम रोकने या जारी करने का निर्णय ले सकती है।
- सवाल
- क्या खुराक के प्रमाण को कीमत वाले चरण से ऊपर रखने पर क्विज़ पूरा होने की दर बढ़ेगी?यह उत्पाद और क्रिएटिव का सवाल है, मीडिया ख़रीदने का नहीं।
- रूपरेखा
- ब्रिटेन के पेड-मोबाइल ट्रैफ़िक के लिए क्विज़ का क्रम A/B टेस्ट करें; क्रिएटिव और दर्शक वही रहें।रैंडम आवंटन; सात-दिन की अवलोकन अवधि।
- ज़रूरी डेटा
- यात्रा के स्तर पर आवंटन, quiz_start, quiz_complete और पहली खरीद।अलग-अलग बनी रहने वाली यात्राएँ, कच्चे इवेंट का कुल नहीं।
- निर्णय का नियम
- अगर पूरा होने की दर कम-से-कम 5 प्रतिशत-अंक बढ़े और पहली खरीद की दर न घटे, तो जारी करें।नतीजा सात-दिन की अवधि पूरी होने के बाद ही देखें। सुरक्षा-मापदंड विफल हो तो विस्तार रोक दें।
यह विकल्प क्यों
आख़िरी क्लिक के आधार पर श्रेय देना अतिरिक्त प्रभाव साबित नहीं कर सकता। टीम को कारण संबंधी दावा करना हो, तो ऐसा डिज़ाइन चाहिए जो उसका समर्थन करे; बस अधिक आत्मविश्वास से लिखा वाक्य नहीं।
अगला कदम
परीक्षण कार्ड, डेटा की ज़रूरतें और ज़िम्मेदार व्यक्ति अगले शोध या योजना बदलाव का आधार बनेंगे।
और बारीकी से देखें: श्रेय निर्धारण बनाम अतिरिक्त प्रभाव
इस कृत्रिम उदाहरण में मापे गए नतीजे बनी रहने वाली यात्राओं और श्रेय दी गई खरीद का वर्णन करते हैं। वे जागरूकता में बढ़त, वास्तविक जीवनकाल मूल्य या अतिरिक्त प्रभाव साबित नहीं करते।
- मापा गया: दो समूहों में सशुल्क-मोबाइल उपयोगकर्ताओं की क्विज़ पूर्णता, सात दिन के अवलोकन के बाद; दर्ज आँकड़ों से समर्थित होने पर पहली खरीद का श्रेय।
- नहीं मापा गया: जागरूकता में बदलाव, वास्तविक जीवनकाल मूल्य, ग्राहक हासिल करने की पूरी अर्थव्यवस्था और अतिरिक्त बढ़त।
- आख़िरी क्लिक का श्रेय मिलान के लिए तय किया जाता है; इससे यह साबित नहीं होता कि अभियान के बिना क्या होता।
- कारण संबंधी दावे के लिए होल्डआउट समूह या रैंडम आवंटन चाहिए।
- जाँचें कि रिपोर्ट किया गया पेज बदलाव मोबाइल यात्रा पर असर डालता है या नहीं; सहायता से जुड़ी चिंता की भी जाँच करें।
पूरा संदर्भ: मापन और परीक्षण की कार्ययोजना
सवाल, आवंटन की इकाई, मुख्य मेट्रिक और सुरक्षा-मापदंड पहले से दर्ज करें। लॉन्च से पहले अवलोकन अवधि तय करें। बाहर रखे गए और गुम डेटा का रिकॉर्ड रखें। नतीजा देखने के बाद सफलता का नया मेट्रिक न जोड़ें। आगे न बढ़ने का निर्णय भी प्रकाशित करें।