ए / बी टेस्टिंग - डायनेमिक्स 365 में मार्केटिंग सक्सेस और यूजर अडॉप्शन को कैसे ड्राइव करें

कभी सोचा है कि नेटफ्लिक्स और ट्विटर जैसे टेक दिग्गज साल-दर-साल प्रतिस्पर्धा में कैसे आगे रहते हैं? उनके ए / बी परीक्षण के पीछे डेवलपर्स के पास जवाब देने के लिए बहुत कुछ है।

मूल रूप से https://daveclark.io/ पर पोस्ट किया गया

नेटफ्लिक्स यहां तक ​​कि ए / बी टेस्ट छवियों का उपयोग फिल्म के शीर्षक के लिए किया गया, अपने दर्शकों की निगाहें नई ब्लॉकबस्टर फिल्मों की ओर खींचते हुए, पहली बार क्लिक करने के परिणामस्वरूप फिल्मों के लिए अधिक मिनट देखे गए और एक बेहतर उपयोगकर्ता अनुभव प्रदान किया।

वास्तव में नेटफ्लिक्स का कहना है कि ए / बी एक शीर्षक छवि का परीक्षण कभी-कभी उस शीर्षक के लिए 20% से 30% अधिक देखने के परिणामस्वरूप होता है। स्रोत।

तो ए / बी परीक्षण क्या है? Dynamics 365 और पावर प्लेटफ़ॉर्म इससे कैसे लाभान्वित हो सकते हैं?

परिचय

यह पोस्ट ए / बी परीक्षण क्या है, यह बताकर शुरू होती है। यह तब उपयोग करने में मदद करने के लिए एक बड़ी तकनीकी फर्म से पावर केस सलाहकारों और डेवलपर्स के रूप में हमें इस टूल के बारे में ध्यान देना चाहिए।

फिर हम पहले से ही उपलब्ध Dynamics 365 में एक उदाहरण के साथ चलते हैं, जिससे हमें विपणन सफलता प्राप्त करने में मदद मिलती है।

अंत में हम अन्य तरीकों पर विचार करते हैं प्रारंभिक उपयोगकर्ता को अपनाने और परियोजना की सफलता और चल रही उत्पादकता में वृद्धि के लिए अंतिम उपयोगकर्ताओं को संलग्न करने के लिए डायनामिक्स में ए / बी परीक्षण का उपयोग किया जा सकता है।

A / B परीक्षण क्या है?

ए / बी परीक्षण के पीछे अवधारणा एक नियंत्रण समूह और एक या एक से अधिक प्रयोगात्मक समूह बनाने और उन्हें एक उत्पाद के विभिन्न संस्करण प्रदान करना है। फिर हम प्रत्येक समूह के खिलाफ मीट्रिक ट्रैक कर सकते हैं, जैसे:

  • Dynamics 365 फ़ॉर्म में भरे गए डेटा की मात्रा
  • किसी प्रपत्र को खोलने और सहेजने में समय लगता है
  • मार्केटिंग ईमेल में क्लिक करें

उत्पाद की कौन सी संस्करण अधिक सफल है यह तय करने में मदद करने के लिए कोई भी महत्वपूर्ण मीट्रिक।

क्या आप कभी ऐसी आवश्यकताओं की बैठक में शामिल हुए हैं जहाँ हितधारक किसी ऐप पर फ़ॉर्म के लिए असहमत हों? ए / बी परीक्षण के साथ, हम ज़ोर से चलने वाले हितधारक के बजाय डेटा के आधार पर उत्पाद परिवर्तन तय कर सकते हैं।

वास्तविक जीवन की सफलता की कहानी

Ubisoft पेरिस में स्थित एक वीडियो गेम प्रकाशक है। आपने उनके या उनके कुछ खेलों के बारे में सुना होगा जिनमें हत्यारे की नस्ल, सुदूर रो और टॉम क्लैंसी की स्प्लिंटर सेल शामिल हैं।

एक नए गेम को जारी करते हुए, फॉर ऑनर के लिए, यूबीसॉफ्ट ने गेम के 'अभी खरीदें' पेज के दो संस्करण बनाए, और छुट्टियों के मौसम (अक्टूबर - दिसंबर 2017) के दौरान प्रत्येक पृष्ठ की सफलता पर डेटा एकत्र किया।

परीक्षण चरण से पहले:

परिकल्पना यह थी कि इस पृष्ठ पर स्क्रॉल करने की आवश्यकता को कम करके खरीद प्रक्रिया को सरल बनाया जा सकता है। जैसा कि ऊपर की छवि दिखाती है, इससे पहले कि खरीदार को अपने पसंदीदा गेम संस्करण का चयन करना होगा, नीचे स्क्रॉल करें, उनके कंसोल का चयन करें, नीचे स्क्रॉल करें, फिर अपना ऑर्डर दें और उनके भुगतान विवरण दर्ज करें।

परीक्षण चरण के बाद:

यह नया संस्करण स्क्रॉल करने की आवश्यकता को हटा देता है क्योंकि सभी खरीद विकल्प एक कॉलम में चयन करने योग्य हैं। दो लेआउट संस्करणों के बीच परीक्षण डेटा की तुलना में लीड जनरेशन में 12% की वृद्धि देखी गई।

आप पूरा मामला अध्ययन यहाँ पढ़ सकते हैं। लेकिन पहले इस पोस्ट के मज़ेदार बिट के लिए छड़ी करें: Dynamics 365 में A / B परीक्षण।

विपणन सफलता के लिए Dynamics 365 में A / B परीक्षण

सही मार्केटिंग ईमेल डिजाइन करना कठिन हो सकता है। शायद आपके पास ईमेल विषय, इमेजरी या शब्दांकन के लिए कुछ समान विचार हैं। आप ठीक हो सकते हैं, जो अंतर्ज्ञान या पिछले अनुभव के आधार पर चुनना है।

या, आप यह पता लगाने के लिए ए / बी परीक्षण का उपयोग कर सकते हैं कि कुछ समान डिज़ाइन आपके दर्शकों के सबसेट पर कौन सा प्रदर्शन करता है। फिर अपने शेष दर्शकों के लिए सफल उम्मीदवार भेजें। जैसा कि हमने पहले के उदाहरणों से देखा है, डेटा पर निर्णय को आधार बनाकर, बजाय एक कूबड़ के, सफलता सुनिश्चित करने के लिए स्मार्ट कदम हो सकता है।

उदाहरण मार्केटिंग के लिए Dynamics 365 में चलता है

इस उदाहरण में हम एक मार्केटिंग ईमेल के दो संस्करण बनाते हैं, संस्करण ए और संस्करण बी। फिर हम अपने मार्केटिंग ईमेल पर मार्केटिंग के लिए Dynamics 365 में A / B परीक्षण सुविधा सक्षम करते हैं। हम देखेंगे कि Dynamics 365 हमें किस संदर्भ में प्रदान कर सकता है:

  • ए / बी परीक्षण कॉन्फ़िगरेशन विकल्प
  • प्रदर्शन मेट्रिक्स
  • परीक्षण के परिणाम डेटा प्रदर्शित करते हैं

मार्केटिंग ईमेल बनाने के लिए आप इस Microsoft गाइड का अनुसरण कर सकते हैं।

यहाँ एक है जिसे मैंने पहले तैयार किया था:

बनाई गई एक विपणन ईमेल के साथ, हम ऊपर स्क्रीनशॉट में विषय फ़ील्ड के बाईं ओर दिखाए गए ऐड ए / बी टेस्ट बटन दबा सकते हैं। ईमेल बॉडी, नाम या ईमेल विषय से होने वाले परिवर्तनों के खिलाफ परीक्षण करने के लिए चयन करें।

मेरे उदाहरण में 'संस्करण B' ईमेल बॉडी में शब्दांकन को थोड़ा बदल देता है:

डायनेमिक्स में ए / बी परीक्षण के लिए ईमेल टेम्प्लेट को कॉन्फ़िगर करने के तरीके के बारे में पूरी जानकारी के लिए, यहां Microsoft के प्रलेखन का संदर्भ लें।

अब हम ग्राहक यात्रा का उपयोग करके अपने ईमेल का परीक्षण करने के लिए तैयार हैं। यहाँ Microsoft के दस्तावेज़ निम्नलिखित नोट करते हैं:

विश्वसनीय परीक्षण परिणामों का उत्पादन करने के लिए, आपको सिस्टम को विजेता चुनने की अनुमति देने से पहले प्रत्येक संस्करण (ए और बी) को न्यूनतम 100 प्राप्तकर्ताओं को भेजना चाहिए। एक विशिष्ट अनुशंसित सेटअप 1,000-सदस्य खंड (या बड़ा) का उपयोग करेगा, एक परीक्षण वितरण के साथ जो कि संस्करण A को 10% खंड, संस्करण B को अन्य 10% पर भेजता है, और फिर जीतने वाले डिज़ाइन को शेष 80% पर भेजता है।

मेरी यात्रा के बस दो चरण हैं: पहले यह मेरे संपर्क आधार (हालिया कार्यक्रम में उपस्थित) का एक सबसेट चुनता है और फिर उन्हें मार्केटिंग ईमेल भेजता हूं जिसे मैंने अभी बनाया है।

पहले बनाए गए मार्केटिंग ईमेल का उपयोग करने के लिए, यात्रा में मार्केटिंग ईमेल संदेश टाइल का चयन करें, फिर दाईं ओर गुण चुनें और 'मार्केटिंग ईमेल संदेश' लुकअप फ़ील्ड में अपना नया संदेश चुनें।

गुण फलक में आप A / B परीक्षण वितरण, जीतने वाली मीट्रिक और परीक्षण अवधि निर्दिष्ट करने में सक्षम होंगे:

उस कॉन्फ़िगर के साथ मैं कमांड बार में 'गो लाइव' पर क्लिक कर सकता हूं। फिर मैं वेटिंग गेम खेलता हूँ! ध्यान दें कि परीक्षण की अवधि के रूप में 1 दिन निर्दिष्ट किया गया था। इस समय के दौरान मैं डेटा पैनल परीक्षण को नीचे स्क्रॉल कर सकता हूं-

एक बार परीक्षण की अवधि समाप्त हो जाने के बाद, एक स्पष्ट विजेता होना चाहिए: इस मामले में ईमेल बॉडी का संस्करण जिसने सबसे अधिक क्लिक-थ्रू प्राप्त किया। मेरे संपर्क-आधार के शेष 80% को तब मेरे मार्केटिंग ईमेल का अधिक सफल संस्करण भेजा जा सकता है।

मेरा परीक्षण ईमेल केवल एक व्यक्ति (मुझे) को परीक्षण के रूप में भेजा गया है, न कि Microsoft द्वारा सुझाए गए उत्पादन-स्तर 100 प्राप्तकर्ता। स्क्रीनशॉट अभी भी उस जानकारी का उदाहरण है जिसे हम ट्रैक कर सकते हैं: भेजा गया दर, वितरित दर, अद्वितीय खुलता और क्लिक। Google Analytics या ClickDimensions के समान। नोट: ClickDimensions A / B टेस्टिंग का भी समर्थन करता है।

Dynamics 365 में A / B परीक्षण के लिए आगे क्या है?

लेखन के समय, Dynamics 365 में मार्केटिंग ईमेल A / B परीक्षण का समर्थन करने वाला एकमात्र मॉड्यूल है। लेकिन अगर आपने इसे पढ़ा है तो आप सोच रहे होंगे: वहाँ क्यों रुकना?

Idea # 1: Azure एप्लिकेशन इनसाइट्स के साथ Dynamics 365 फ़ॉर्म विश्लेषण

परिकल्पना: एक समान रूप (उदाहरण के लिए एक जटिल ग्राहक सेवा प्रपत्र) के विभिन्न संस्करणों के साथ उपयोगकर्ताओं के सबसेट प्रदान करके, हम यह निर्धारित करने के लिए एज़्योर एप्लिकेशन इनसाइट्स (एएआई) का उपयोग कर सकते हैं जो अधिक उत्पादक रूप है और इसलिए टीम उत्पादकता बढ़ाती है। यह ए / बी परीक्षण परिदृश्य निम्नानुसार काम करेगा:

  • ग्राहक सेवा टीम के दो सबसेट को एक अद्वितीय सुरक्षा भूमिका दी जाएगी
  • दो नए ग्राहक सेवा (केस) फॉर्म बनाए जाएंगे; प्रत्येक समान लेकिन परिवर्तनों के साथ हम अधिक उत्पादक होने की परिकल्पना करते हैं
  • प्रत्येक प्रपत्र को सुरक्षा नियंत्रण पहुंच का उपयोग करके एक अलग उपयोगकर्ता सबसेट पर दिया जाता है
  • एएआई और उपयोग एनालिटिक्स का उपयोग उपयोगकर्ताओं के प्रदर्शन मैट्रिक्स को मापने और निर्धारित करने के लिए किया जा सकता है कि कौन सा फ़ॉर्म अधिक सफल है (हमारे उपयोगकर्ताओं के लिए अधिक उत्पादक)
  • अधिक सफल फ़ॉर्म को ग्राहक सेवा टीम में सभी उपयोगकर्ताओं के लिए रोल आउट किया जाएगा

आइडिया # 2: Google ऑप्टिमाइज़ के साथ डायनेमिक्स पोर्टल्स

Google Analytics इन दिनों अधिकांश पोर्टल्स पर स्थापित है। यह उपयोगकर्ताओं को हमारे पोर्टल्स पर प्रतिक्रिया देने के लिए प्रदर्शन और उपयोग के आँकड़ों को ट्रैक करने में मदद करता है।

ऐसा लगता है कि इसका व्यापक रूप से कम उपयोग किया जा रहा है: Google ऑप्टिमाइज़: Google का एक उपकरण यह समझने के लिए डेटा-संचालित दृष्टिकोण की पेशकश करता है कि हमारे उपयोगकर्ताओं के लिए सबसे अच्छा अनुभव बनाने के लिए एक पोर्टल पर निरंतर UX सुधार कैसे किए जा सकते हैं। Google का वर्णन इस प्रकार है:

ऑप्टिमाइज़ मूल रूप से Analytics के साथ एकीकृत है जिससे आपको यह पता लगाने में मदद मिलेगी कि आपकी साइट के किन हिस्सों में सुधार की आवश्यकता है। समस्या क्षेत्रों को जल्दी और आसानी से पहचानने के लिए अपने Analytics साइट डेटा का उपयोग करें, फिर उन जानकारियों को एक ऑनलाइन अनुभव प्रदान करने के लिए कार्रवाई में बदलें जो आपके ग्राहकों के लिए सबसे अच्छा काम करता है।

ऑप्टिमाइज़ेशन टूल अक्सर मार्केटिंग प्रदर्शन में वृद्धि के लिए आरक्षित होते हैं, अक्सर हमारे अंतिम उपयोगकर्ताओं द्वारा उपयोग किए जाने वाले अनुकूलन रूपों से मिलने वाले लाभों की उपेक्षा करते हैं। डायनामिक्स पोर्टल्स को अक्सर एक चेकआउट के साथ बाज़ार के रूप में उपयोग किया जाता है, लेकिन कभी-कभी वे Dynamics 365 में एक बाहरी विंडो होते हैं, जिसका उपयोग व्यवस्थापक करते हैं।

Google ऑप्टिमाइज़ A / B परीक्षण का उपयोग करता है और यह भी सरल बनाता है कि हम अपने पोर्टल्स का उपयोग करके अंत उपयोगकर्ताओं के लिए उत्पादकता बढ़ा सकते हैं। इस नई सादगी को देखते हुए मुझे लगता है कि यह समय उत्पादकता को ध्यान में रखते हुए दिया जाता है जब यह अनुकूलन की बात आती है, बजाय इसके केवल विपणन लाभ पर ध्यान केंद्रित करने के।

आगे बढ़ते हुए

मैं भविष्य के लेख पोस्ट में उपरोक्त बिंदुओं का पता लगाना चाहता हूं, हालांकि अब उन्हें विचारों के रूप में रहना होगा। शायद आपके पास अपने स्वयं के विचार हैं कि पावर प्लेटफ़ॉर्म ऐप्स और Dynamics 365 के उपयोगकर्ता अनुभव को बढ़ाने के लिए A / B परीक्षण का उपयोग कैसे किया जा सकता है?

निष्कर्ष

हमने देखा है कि ए / बी टेस्टिंग का इस्तेमाल टेक कंपनियों द्वारा बड़े प्रभाव के लिए किया जाता है ताकि टेस्ट को अलग किया जा सके। मार्केटिंग के लिए Dynamics 365, लीड्स या संपर्कों के बड़े लक्षित दर्शकों वाली टीमों के लिए A / B परीक्षण करता है, जो बड़े पैमाने पर ईमेल की स्थिति है। नए विपणन अभियान ईमेल पहले प्राप्तकर्ताओं के सबसेट के खिलाफ ट्रायल किए जाते हैं, सफलता मेट्रिक्स का विश्लेषण किया जाता है, और शेष दर्शकों को भेजे जाने के लिए चुना गया एक जीत ईमेल लेआउट। यह ईमेल विपणन डिजाइन निर्णयों को अंतर्ज्ञान के बजाय अनुभवजन्य साक्ष्य पर आधारित होने की अनुमति देता है।

Dynamics 365 के उपयोगकर्ता अनुभव को बढ़ाने के लिए A / B परीक्षण का उपयोग किया जा सकता है, यह मानते हुए कि इसके विरुद्ध परीक्षण करने के लिए उपयोगकर्ताओं का एक बड़ा समूह है। Google Analytics और Azure एप्लिकेशन इनसाइट्स डायनामिक्स उत्पाद परिवर्तनों के प्रमुख प्रदर्शन संकेतकों को मापते हैं जैसे कि फ़ॉर्म लेआउट और प्रक्रिया प्रवाह। यह निर्धारित करने के लिए एक साक्ष्य-आधारित दृष्टिकोण तैयार कर सकता है कि हमारे उपयोगकर्ताओं के लिए कौन से उत्पाद परिवर्तन अधिक उत्पादक हैं, और इसलिए इसे हमारे संपूर्ण उपयोगकर्ता आधार पर रोल आउट किया जाना चाहिए।