एक वेबसाइट, ईमेल या अन्य वाणिज्यिक उत्पाद के वेरिएंट की प्रभावशीलता की नियंत्रित तुलना। आमतौर पर, उपचार की स्थिति के प्रभाव को निर्धारित करने के लिए एक आधार रेखा या नियंत्रण स्थिति के खिलाफ एक उपन्यास या उपचार की स्थिति की तुलना की जाती है।

ए / बी परीक्षण, या विभाजन परीक्षण, एक प्रयोग के लिए एक व्यावसायिक शब्द है जिसमें उपयोगकर्ता किसी उत्पाद के कई प्रकारों में से एक के लिए यादृच्छिक रूप से उजागर होते हैं, अक्सर एक वेबसाइट सुविधा।

प्रतिक्रिया या आश्रित चर सबसे अधिक बार गणना डेटा (जैसे लिंक या बिक्री पर क्लिक) के रूप में है, लेकिन एक सतत उपाय (साइट पर समय की तरह) हो सकता है। गणना डेटा को कभी-कभी विश्लेषण के लिए दरों में बदल दिया जाता है।

क्योंकि वे 'लाइव' वेबसाइटों के अस्थायी संस्करण बनाते हैं, ऑनलाइन ए / बी परीक्षणों को मानव वरीयता के पारंपरिक प्रयोगों में आम नहीं कई चुनौतियों को पार करना होगा। उदाहरण के लिए, परीक्षण संस्करणों के अंतर कैशिंग कुछ संस्करणों के लिए वेबसाइट के प्रदर्शन को नीचा दिखा सकते हैं। यदि वे किसी वेबसाइट पर वापस आते हैं और कुकीज़ या लॉगिन जानकारी द्वारा सफलतापूर्वक पहचाने नहीं जाते हैं, तो उपयोगकर्ताओं को कई प्रकार दिखाए जा सकते हैं। इसके अलावा, अमानवीय गतिविधि (खोज इंजन क्रॉलर, ईमेल हार्वेस्टर और बॉटनेट) को मानव उपयोगकर्ताओं के लिए गलत माना जा सकता है।

उपयोगी संदर्भ:

कोहावी, रॉन, रैंडल एम। हेने, और डैन सोमरफील्ड। "वेब पर नियंत्रित प्रयोगों के लिए प्रैक्टिकल गाइड: HiPPO के लिए अपने ग्राहकों को सुनो।" (2007)।

कोहावी, रॉन, एट अल। "भरोसेमंद ऑनलाइन नियंत्रित प्रयोग: पांच हैरान कर देने वाले नतीजे।" नॉलेज डिस्कवरी और डाटा माइनिंग पर अंतर्राष्ट्रीय ACM SIGKDD के 18 वें सम्मेलन की कार्यवाही। एसीएम, 2012।