قراءة النتائج

عند انتهاء الاختبار، انظروا أولًا إلى المقياس الأساسي الوحيد الذي سجلتموه مسبقًا. فهذا الرقم وحده يحدد الفائز.

قاوموا الرغبة في البحث ضمن المقاييس الثانوية عن أي إشارة إيجابية. فاختيار نتيجة إيجابية عابرة هو ما يجعل الفرق تقنع نفسها بأن اختبارًا بلا تأثير قد نجح.

يعرض جدول النتائج المنظم عدد الزوار والتحويلات ومعدل التحويل والزيادة النسبية ومستوى الثقة لكل نسخة.

افحصوا الجدول من أعلاه إلى أسفله. وتأكدوا من توازن أحجام العينات ومن بلوغ مستوى الثقة الحد الذي حددتموه قبل الاحتفال بأي زيادة.

ينتهي كل اختبار بفائز أو خاسر أو بنتيجة غير حاسمة. وكل واحدة من هذه النتائج قيّمة.

يخبركم الفائز بما ينبغي إطلاقه. ويخبركم الخاسر بما ينبغي تجنبه. أما النتيجة غير الحاسمة فتخبركم بأن التأثير، إن وُجد، كان أصغر من أن تكتشفه حركة الزيارات لديكم.

النتيجة المستوية لا تعني أن الاختبار أُجري بلا فائدة. فهي تستبعد فرضية وتجنبكم إطلاق شيء لا يُحدث أي أثر.

تعاملوا مع الاختبارات غير الحاسمة باعتبارها دليلًا. فإما أن يكون التغيير دقيقًا أكثر من اللازم، أو أن تكون حركة الزيارات منخفضة جدًا، أو أن تكون رؤيتكم غير صحيحة. وكل احتمال منها يعلّمكم أين تبحثون بعد ذلك.

قبل إطلاق نتيجة فائزة، تأكدوا من أن مقاييس الحماية لم تتحرك في الاتجاه الخاطئ. فلا تعني زيادة التسجيلات الكثير إذا ارتفعت طلبات استرداد الأموال أو معدل مغادرة العملاء.

تحقق النصر الحقيقي عندما يحسّن المقياس الأساسي من دون الإضرار بصحة النشاط التجاري في المراحل اللاحقة.

قد تخفي النتيجة العامة المستوية تأثيرات متعاكسة في شرائح مختلفة. فقد تفوز النسخة على الأجهزة المحمولة، لكنها تخسر على أجهزة سطح المكتب، فيلغي التأثيران أحدهما الآخر.

قسّموا النتائج حسب الجهاز أو مصدر الزيارات أو المستخدمين الجدد مقارنةً بالعائدين، لكن تعاملوا مع نتائج الشرائح باعتبارها فرضيات جديدة لا انتصارات مؤكدة.

يؤدي تقسيم البيانات إلى شرائح كثيرة إلى مضاعفة احتمال العثور على فائز زائف في مكان ما. فإذا اختبرتم عددًا كافيًا من المجموعات الفرعية، فستبدو إحداها مهمة إحصائيًا بمحض الصدفة.

إذا بدت إحدى الشرائح واعدة، فتحققوا منها باختبار جديد مخصص لها قبل اتخاذ أي إجراء. لا تطلقوا أي تغيير اعتمادًا على تقسيم لاحق للبيانات وحده.

حوّلوا نسبة الزيادة إلى مصطلحات تجارية. فقد تبدو زيادة نسبية قدرها 17% رائعة، لكن أصحاب المصلحة يهتمون بالإيرادات.

اضربوا معدل التحويل الجديد في حجم الزيارات ومتوسط القيمة لتقدير الأثر السنوي. فهذا الرقم يوجّه قرار الإطلاق وخارطة الطريق لديكم.

سجّلوا الفرضية والنتيجة ومستوى الثقة وحجم التأثير والقرار في سجل مشترك. فالاختبارات السابقة تمثل قاعدة معرفية تمنع تكرار الطرق المسدودة.

شاركوا النجاحات والإخفاقات مع الفريق حتى تتراكم الرؤى المفيدة عبر برنامج التجارب بأكمله.

لا يضمن الفوز في الاختبار تحقيق الزيادة نفسها في بيئة الإنتاج. بعد التوسع إلى 100%، راقبوا المقياس لمدة أسبوعين تقريبًا.

قد تؤدي تأثيرات الجِدّة والموسمية وأخطاء التنفيذ إلى تآكل النتيجة. تأكدوا من استمرار الفوز قبل احتساب الإيرادات المتوقعة ضمن خططكم.

التحسين حلقة متكررة وليس إجراءً لمرة واحدة. وينبغي أن تؤدي كل نتيجة، سواء كانت فوزًا أو خسارة، إلى طرح الفرضية التالية.

فقد تلهم شارة ناجحة لتقليل المخاطر اختبارَ ضمان أقوى. وقد يوجّهكم تخطيط خاسر إلى مسار آخر. وتؤدي التجارب المستمرة إلى تراكم مكاسب صغيرة وتحويلها إلى مكاسب كبيرة.

قيّموا الاختبارات وفق المقياس الأساسي المسجل مسبقًا، وتحققوا من مقاييس الحماية قبل الإطلاق. فالنتائج غير الحاسمة تعني أيضًا اكتساب معرفة.

قسّموا النتائج بعناية من دون البحث العشوائي بين الشرائح، وحوّلوا الزيادات إلى أثر تجاري، ووثّقوا كل اختبار، وتحققوا من استمرار الانتصارات في بيئة الإنتاج، وأدخلوا كل نتيجة في التجربة التالية.