अल्पकालिक जीत अक्सर दीर्घकालिक रूप से गायब हो जाती हैं

मैं सभी को प्रोत्साहित करूंगा, यदि आप कर सकते हैं, तो उन प्रयोगों पर नज़र डालें जिन्हें आप अपनी सबसे बड़ी जीत मानते हैं। एक वर्ष, दो वर्ष बाद उस प्रयोग के लिए डाउनस्ट्रीम मीट्रिक्स को देखें। और मैं दांव लगाऊंगा कि आप आश्चर्यचकित होंगे कि कितनी बार मीट्रिक अलग होती है उस से जो आप सोचते थे।

मेरा मानना है कि शायद दो चीजें बहुत आम हैं। और मैं कहूंगा कि कई मामलों में, आप मीट्रिक में एक लिफ्ट प्राप्त करते हैं शुरुआत में, एक अधिक अल्पकालिक मीट्रिक... और फिर आप एक साल बाद देखते हैं, और वास्तव में GMV पर कोई अतिरिक्त लिफ्ट नहीं है।

यह प्रतिशत इस बात का संकेत देता है कि सकारात्मक अल्पकालिक परिणामों वाले वृद्धि प्रयोग में से 30 से 40 प्रतिशत का एक साल बाद कोई दीर्घकालिक प्रभाव नहीं पड़ता।

यह 30 से 40% के दायरे में है।

ग्रोथ लूप्स का अधिकांश भाग उनकी क्षमता को पैदा करने में सक्षम होता है कि वे आपके लिए महत्वपूर्ण परिणाम उत्पन्न कर सकते हैं पहले पांच से छह से सात वर्षों में।

मेरे लिए, कुंजीशब्द 'जीवनकाल मूल्य' है, जिसका अर्थ है कि आपको ऐसे OEC को परिभाषित करना होगा जिससे A/B परीक्षणों में दीर्घकालिक प्रभाव का आकलन किया जा सके।

मेरे लिए, कुंजी शब्द आजीवन मूल्य है, जो है कि आप ऐसा OEC परिभाषित करने के लिए होना चाहिए जो कि उपयोगकर्ता के आजीवन मूल्य का कारणात्मक रूप से भविष्यवाणी करे।