متطلبات تشغيل برامج التجارب الجادة

تشغيل البرامج التجريبية فن وعلم. أقول ذلك في كل وقت. يجب أن تتمتع البرامج بمستوى معين من الدقة - بمعنى الأنظمة والعمليات والإجراءات. إنه ليس شيئًا يمكن الاستخفاف به. الاعتقاد بأن أي شخص يمكنه بدء برنامج غدًا بأقل قدر من الإعداد والتخطيط هو خطأ. لسوء الحظ ، هذا يحدث طوال الوقت. إنه يؤدي إلى إهدار الكثير من المال والوقت والجهد - بشكل غير مفاجئ. هذا يقودني إلى موضوع الإعداد.

إذا كنت تريد أن تكون جادًا بشأن التجريب ورفع مستوى قدرتك على المنافسة في السوق ، فمن الأفضل أن تقوم بذلك بشكل جيد. يجب أن تفترض أن منافسيك يقومون بذلك بشكل جيد. لذلك إذا كان هذا صدى معك ، فاستمر في القراءة وأضمن أنك ستلتقط كتلة صلبة ذهبية أو اثنتين لاستخدامها على الفور.

مقدمة لا مفر منها لبناء برنامج تجريبي من شأنه أن يجعلك أو يفسدك: حسابات الاختبار المسبق

حسابات الاختبار الأولي. هل سمعت عنها من قبل؟ هل فعلتها؟ هل يبدو تأثير MDE أو الحد الأدنى من التأثير القابل للاكتشاف مألوفًا؟ ماذا عن تقديرات المدة أو أحجام العينات؟ أتمنى أن تعرف ما أتحدث عنه على الرغم من أنني أراهن على أموال لا يملكها الغالبية العظمى منكم - ببساطة بسبب تجربتي الشخصية مع العملاء.

قبل أن تفعل أي شيء متعلق بالتجربة ، يرجى معرفة ما إذا كان لديك حجم بيانات كافٍ للقيام بذلك. تحقق مما إذا كنت قادرًا على الاختبار على الإطلاق من خلال حسابات الاختبار المسبق. حسب حجم البيانات ، أعني الزوار والتحويلات. يمكن أن يكون الزائرون أي شيء تستخدمه عادةً (على سبيل المثال ، الجلسات والمستخدمون ووحدات MAU وما إلى ذلك). التحويلات من المقياس الأساسي الذي ستستخدمه في اختباراتك. تعرف على هذا:

1. ليس كل نشاط تجاري لديه حجم بيانات كافٍ لإجراء التجارب بأي سعة.
2. إذا كان بإمكانك فعل ذلك ، فاعلم أنك لا تنتقي السرعة المرغوبة من فراغ. يعتمد على الحسابات.

السبب الأول وراء تجاهل إحدى هاتين النقطتين أو كليهما: موظفو المبيعات. إذا كنت تبحث عن شراء أي نوع من الأدوات ، فتأكد من أن هذا جزء من المحادثة. الحد الأدنى للحاجز للدخول للحصول على برنامج تجريبي: حجم بيانات كافٍ لإجراء اختبار واحد في غضون ثمانية أسابيع أو أقل في مسار سباحة واحد.

لقد غطيت هذا الموضوع بالتفصيل قبل بضعة أشهر لـ Experiment Nation. اعلم أنه إذا لم تفهم هذا الموضوع وقمت به منذ اليوم الأول ، فسوف يطاردك وسيؤدي بالتأكيد إلى نتائج غير مرغوب فيها من نوع ما في النهاية. ملاحظة أخرى مهمة للغاية: تعرف على ما إذا كانت أداة الاختبار الخاصة بك (أو الأداة التي تخطط لاستخدامها) مبنية على اختبار الأفق الثابت أو الاختبار المتسلسل. يؤثر هذا على العمليات الحسابية وكيفية تشغيل برنامجك.

الخطوة 1 (ما بعد السلائف): القياس وجودة البيانات

إذا قمت بمسح عقبة حسابات الاختبار المسبق وتأكدت من أن لديك حجم بيانات كافٍ للاختبار ، فإن العقبة التالية للمضي قدمًا هي القياس وجودة البيانات. يجب أن تعرف ما تهدف إليه في هذا العمل ؛ خلاف ذلك ، سوف تتخبط مثل سمكة على ضفة النهر. لا يعرف عدد كبير جدًا من الفرق ما الذي يعملون من أجله - مثل عمليات إرسال النماذج والمعاملات والإيرادات والقيمة الدائمة ، وما إلى ذلك.

افهم ما هي المقاييس الأساسية والثانوية والثالثية الخاصة بك للتجربة والعمل ككل. افهمها بوضوح تام. لا تسمح للارتباك أو عدم اليقين المستمر. تأكد من أن الجميع على نفس الصفحة.

بعد ذلك ، بمجرد حصولك على هذا القدر ، تأكد من أنك تجمع هذه البيانات في الأماكن الصحيحة وأنه يمكنك الوثوق بها.

إذا كان القياس و / أو جودة البيانات كارثيين ، توقف فقط. أوقف كل شيء وكرس كل جهودك نحو تصحيحه. فكر في التجريب كهرم. هذان الشيئان هما الطبقات التأسيسية للهرم. إذا تصدع في أي وقت ، فسوف ينهار كل شيء آخر فوقه. أعدك.

سأقول إنني أعلم أن هذه يمكن أن تكون صعبة. يمكن أن يستغرق تصحيحها وقتًا إضافيًا. ربما أكثر من شهر أو شهرين. الحصول عليها بشكل صحيح يستحق كل هذا العناء بالرغم من ذلك. لقد رأيت مشكلات تظهر بعد ستة أشهر أو أكثر من إطلاق البرنامج - فقط حتى يتوقف كل شيء في النهاية. لا أحد سعيد في تلك المرحلة.

ملاحظة حول ما يجب أن يكون عليه المقياس الأساسي ...

هذا موضوع مثير للانقسام بين الممارسين في بعض الأحيان. لدي موقف حازم للغاية بشأن هذه المسألة ، خاصة عندما يتعلق الأمر بفرق التسويق والمواقع الإلكترونية (وليس بالضرورة فرق المنتجات والمنتجات).

يجب أن تكون المقاييس الأساسية دائمًا مقاييس مسار التحويل السفلي. طلبات. عمليات إرسال النموذج. MQLs. ربح. LTV. SQLs. انت وجدت الفكرة. يقول بعض الأشخاص إنهم يجب أن يكونوا دائمًا الإجراء الأقرب للتغيير الذي تقوم به أو مقاييس التفاعل. خطأ. رقم كلا. غير صحيح. بكالوريوس. من يخبرك بهذا يجب أن يكون هو الشخص الذي يتعين عليه تبرير البرنامج في ستة أشهر أو سنة إلى CMO أو الرئيس التنفيذي للشركة. سيكونون في المقعد الساخن. لا تملك برنامجًا مليئًا بالاختبارات التي تركز على نقرات الأزرار ، والنقرات ، ومرات مشاهدة الصفحة ، ومتوسط مدة الجلسة ، ومعدل الخروج ، ومعدل الارتداد ، ومرات مشاهدة الفيديو ، وما إلى ذلك. هذا لن يبرر آلاف أو مئات الآلاف من الدولارات التي أنفقت للقيام بهذا العمل. يريد الجميع معرفة عائد الاستثمار وكيف أثر العمل على المحصلة النهائية. النقرات على الزر لن تفعل ذلك.

أنا لا أقول لا تقيس مقاييس المشاركة أو مقاييس مسار التحويل الأعلى ، لكن يجب أن تكون مقاييس ثانوية أو من الدرجة الثالثة. ليست أولية. يضيفون سياقًا إلى قصة الاختبار. إنها ليست الاختبارات التي تتوقف عليها عندما يحين الوقت لاتخاذ القرار. ملاحظة ، أنا أيضًا لا أقول أنه لا توجد استثناءات أبدًا. لا يزال تقييم الاختبارات على أساس كل حالة على حدة.

كلمة نصيحة: لأولئك الذين يناقشون هذا الموضوع فيما بينكم ، أقول دائمًا للفرق لمناقشة الخيارات واتخاذ القرار بأنفسهم. فقط تأكد من وصولك إلى نتيجة جماعية مفادها أن الجميع يلتزمون بالمضي قدمًا.

الخطوة الثانية: البحث عن المستخدم وتصوره

في هذه المرحلة ، يجب أن (1) تعرف أن لديك حجم بيانات كافٍ للاختبار و (2) تعرف ما تقيسه وأنك تجمع بيانات مناسبة يمكنك الوثوق بها. إذا ما هو التالي؟ إنه يأتي بما يجب اختباره. ما هي أفكار الاختبار الخاصة بك؟ كيف ستنشئهم؟

خمن ماذا تفعل معظم الفرق؟ إنها تنطلق من المشاعر الغريزية والكثير من "نفكر" و "نشعر" و "نعتقد". هذا أمر شخصي للغاية ، وهي طريقة مروعة لتشغيل برنامج. هذا النهج ليس مدعومًا بالبيانات على الإطلاق. إنه ما يسميه الممارسون "اختبار السباغيتي" وهو يقذف الأشياء على الحائط على أمل أن تلتصق. لا تتضمن المحادثات المستندة إلى البيانات الكثير من هذا النوع من اللغة ، والبيانات المطلوبة تأتي من بحث المستخدم. يتم سؤالي عن معنى "البحث" طوال الوقت.

حسنًا ، هناك العديد من المنهجيات التي تجمع البيانات بما في ذلك على سبيل المثال لا الحصر التحليلات ، واستطلاعات الرأي ، والاستطلاعات ، واختبار المستخدم ، واختبار الرسائل ، والخرائط الحرارية ، وتسجيلات الجلسات ، وفرز البطاقات ، واختبار الشجرة ، ورسم خرائط رحلة العميل ، والشخصيات ، وغيرها الكثير. هناك أيضًا العديد من الأدوات لمساعدتنا في إكمال كل منها. أقول دائمًا أن أبدأ بواحد أو اثنين واعمل في طريقك إلى الآخرين من هناك. هذا بالتأكيد أفضل من لا شيء. من الناحية الفنية ، لم أعد أحسب التحليلات حقًا لأن كل شركة لديها بيانات تحليلية هذه الأيام. إذا لم يكن لديك ذلك ، فمن المحتمل أن يكون لديك سمكة أكبر للقلي. إذا كان لديك ذلك ، فاجاهد من أجل واحد أو اثنين بعد ذلك (ولا تقل "أوه نحن جيدون إذن").

هناك منهجية تسمى التقييم الكشف عن مجريات الأمور. هذا عندما يقوم شخص ما بتقييم تجربة بصريًا ويطور رؤى بناءً على تجربته وخبراته. هناك وقت ومكان لذلك ، لكنها غير مدعومة "ببيانات صلبة" في معظم الأوقات. إنها ذاتية تمامًا وستختلف إلى حد ما اعتمادًا على من يكملها. اعلم أن برنامجك لا ينبغي أن يعتمد على هذه الأنواع من الأفكار.

لن أقوم بتغطية كيفية إجراء البحث بتفصيل كبير هنا ، ولكن يمكنك الاطلاع على إحدى ندوات VWO عبر الويب الخاصة بي هنا حيث أتحدث أكثر عن نموذج ResearchXL الخاص بـ CXL.

الخطوة 3: تحديد الأولويات

بمجرد الحصول على قائمة بأفكار الاختبار ، لا يمكنك إجراؤها جميعًا مرة واحدة. أنت بحاجة إلى طريقة إستراتيجية ومنطقية لإنشاء خطة عمل. هذا هو المكان الذي تلعب فيه أطر تحديد الأولويات. يوجد الكثير. أحب واحدًا على وجه الخصوص: إطار عمل PXL من CXL. تشمل الأنواع الشائعة الأخرى PIE أو ICE أو PILL. إن PXL هو الأكثر موضوعية في رأيي. إنه قابل للتخصيص وأكثر قوة (بطريقة جيدة).

الموديلات الأخرى بخير وأفضل من لا شيء. إذا كان لديك شيء ويعمل من أجلك ، فهذا رائع. فقط احصل على واحدة وتأكد من أن الجميع يستخدمها! إنه يوفر عليك التعامل مع المزيد من الفوضى.

الخطوة 4: خارطة الطريق

تظهر لك خرائط الطريق بصريًا ما يتم تشغيله في أي وقت. اجمع بين تحديد الأولويات والاختبار المسبق وحسابات الازدهار. لديك خارطة طريق. من الأفضل القيام بذلك في مخططات جانت. أضف جميع مسارات السباحة والاختبارات الخاصة بك مع المدد المقدرة والأجهزة وبيانات التعريف الأخرى المفيدة. سوف تتجنب التداخل غير المرغوب فيه وتأثيرات التفاعل غير المرغوب فيه. يساعد الجميع على التخطيط بشكل أكثر فعالية وكفاءة. هذا سيوفر لك المزيد من الفوضى.

الخطوة الخامسة وما بعدها: العمل كالمعتاد

الآن بعد أن انتهى كل ما غطيناه ، أصبح العمل كالمعتاد. لديك اختبار في متناول اليد ستجريه. يمكنك إرسالها من خلال سير عمل التجربة المعتاد: نموذج بالحجم الطبيعي> تصميم> تطوير> سؤال وجواب> إطلاق> مراقبة> اختتام> تحليل> مشاركة وأرشفة> تكرار.

الموضوعات ذات الصلة: إدارة البرنامج والحوكمة

خارج الاختبارات الفردية ، هناك موضوعات أخرى يجب وضعها في الاعتبار فيما يتعلق "بالبرنامج" بأكمله. وتشمل هذه إدارة البرنامج والحوكمة. إليكم كيف أفكر فيهم بطريقة مسلية للغاية ...

إدارة البرنامج: كيف ستقوم بتنظيم كل هذا العمل وتتبعه؟ اكتشف الأدوات التي ستستخدمها للمهام وإدارة البيانات والتواصل. (حصلت على هذا الانهيار من Ben Labay ، الرئيس التنفيذي لشركة Speero.)

الحوكمة: ما هي الأدوار والمسؤوليات التي يتحملها كل فرد؟ هناك طريقة مفيدة لتحديد ذلك وهي (1) اختيار نموذج الحوكمة و (2) إكمال مخطط RASCI المتوافق مع نموذج الحوكمة. نماذج الحوكمة المشتركة للتحقيق والنظر في: فردي ، مركزي ، لامركزي ، مركز امتياز ، مجلس اختبار ، وهجينة.

إذا لم تقم بإصلاح هذين الأمرين بكل شيء آخر ، فستكون هناك فوضى إضافية وستدفع مقابل ذلك في كل خطوة على الطريق. مسمار هذه أسفل. يستغرق الأمر وقتًا إضافيًا ، لكنه يستحق ذلك. إذا اخترقت طريقك من خلال الأشياء لفترة من الوقت ، فستلحق بك العواقب في النهاية. أعدك. (على ما يبدو ، لقد قطعت وعودًا قليلة هنا).

خاتمة

يجب أن تشعر بثقة أكبر (أو كثيرًا) فيما يمكنك القيام به للبدء في التجريب أو ما يمكنك فعله لرفع مستوى برنامجك قيد التشغيل بالفعل. لا تشعر أنه صعب للغاية أو سهل للغاية. عادة ما يكون في مكان ما في المنتصف. أكبر توصياتي تنطبق على كل ما ذكرته: هل لديك لاعب قورتربك. احصل على شخص يقود كل هذا العمل. لا يجب أن يكون دورهم بدوام كامل ، ولكن يجب أن يمتلكه شخص ما. هذا عادة عندما رأيت أكبر قدر من النجاح.

في الختام ، أتمنى أن يكون لديك برنامج تجريبي مليء بالصرامة والنتائج والقليل من المرح. في نهاية اليوم ، إنه عمل ممتع ومثير يمكن أن يحدث فرقًا كبيرًا في الأعمال التجارية.

إذا كنت ترغب في معرفة المزيد حول كيفية دفع التجريب للابتكار والنمو وهو أمر يستحق كل هذا الضجيج ، شاهد أحدث ندوة عبر الإنترنت مع VWO.