सब कुछ परीक्षण करें, लेकिन सही संस्करण का परीक्षण करें

मैं काफी स्पष्ट हूं कि मैं सब कुछ परीक्षण करने के बड़े समर्थक हूं, यानी कि आप जो भी कोड परिवर्तन करते हैं, जो भी सुविधा लाते हैं, उसे किसी प्रयोग में होना चाहिए। क्योंकि मैंने देखा है कि छोटे से बग फिक्स या छोटे परिवर्तन भी कभी-कभी आश्चर्यजनक और अप्रत्याशित प्रभाव डाल सकते हैं।

आप कभी भी एक प्रयोग या परीक्षण से यह कहकर दूर नहीं जाना चाहते हैं कि 'शायद कार्यान्वयन खराब था क्योंकि किसी चीज की जाँच करने के लिए टीम को मोबिलाइज करना काफी ऊर्जा लेता है', और आप सुनिश्चित करना चाहते हैं कि आपके परीक्षण वास्तव में सिग्नल प्रदान करें।

मैं कहूंगा कि सब कुछ परीक्षण करें, हमने पिछले चार सालों में स्ट्रीक्स पर 600 से अधिक प्रयोग किए हैं, यानी हर दूसरा दिन।

किसी ऐसी जगह, किसी ऐसी टीम का चयन करें जहां प्रयोग चलाना आसान हो। उस टीम के साथ मत जाओ जो हर छह महीने में लॉन्च करती है, या जिस तरह से ऑफिस पहले तीन साल में एक बार लॉन्च करता था। उस टीम के साथ जाओ जो बार-बार लॉन्च करता है।

मैंने टीम को छह महीने तक इस प्रयोग नहीं करने दिया ताकि हम कम लागत वाले अवसरों पर ध्यान केंद्रित कर सकें। हमने यह बहुत सरल प्रयोग चलाया था जिसमें कहा गया था कि 'आप साइन अप करते हैं और फिर आपको एक बैज मिलता है।' और तर्कसंगत रूप से, यह कोई नतीजा नहीं दे पाया, क्योंकि कोई भी अपने साइन अप होने पर गर्व महसूस नहीं करता।