الاختبار دون خداع النفس
الدرس 11 من 16 في دورة «تسويق 2027». مجاني، مع رسوم متحركة واختبار.
فكرة انتظرت ستة أشهر
في Microsoft Bing اقترح أحد الموظفين شيئًا بسيطًا: إطالة عنوان الإعلان في البحث بنقل جزء من نص السطر التالي إليه. اعتُبرت الفكرة صغيرة فبقيت في قائمة الانتظار أكثر من ستة أشهر. ثم قضى مهندس يومين وأطلق اختبارًا: نصف الناس رأى النسخة القديمة والنصف الآخر الجديدة. خلال ساعات أطلق النظام إنذار «أجمل من أن يكون حقيقيًا». فحصوا الأمر فلم يجدوا خطأ: رفع التغيير الإيرادات 12%، وقدّر الكتّاب ذلك بأكثر من 100 مليون دولار سنويًا في الولايات المتحدة وحدها. نُشرت القصة في هارفارد بزنس ريفيو عام 2017. والعبرة بسيطة: لا يمكن تخمين قيمة الفكرة بالنظر، بل باختبارها فقط.
معظم الأفكار لا تنجح
في المقال نفسه رقم يعيدك إلى الواقع. في Google وBing لا تعطي نتيجة إيجابية سوى 10–20% من التجارب. وفي مايكروسوفت عمومًا يفيد نحو ثلث الأفكار، ولا يغيّر الثلث شيئًا، ويضرّ الثلث الأخير. وهذه شركات لديها فرق تحليل ضخمة. لماذا؟ لأن البشر بارعون في اختراع التفسيرات، لكنهم ضعفاء في توقّع سلوك آلاف الغرباء. وفي الإعلانات يعني هذا أمرين. الأول: لا تحزن إن خسر إعلانك «العبقري»، فهذا طبيعي. الثاني: لولا الاختبار لأطلقت فكرة ضارة دون أن تعرف. لذلك الاختبار ليس بيروقراطية، بل تأمين ضد ثقتك الزائدة بنفسك.
اختبار واحد، فرق واحد
الاختبار النزيه يعمل هكذا: يُقسَم الجمهور إلى جزأين، ويرى كل شخص نسخة واحدة فقط. وتختلف النسختان في شيء واحد فقط، مثل الخطاف في الثواني الأولى. وكل ما عدا ذلك متطابق: الميزانية والعرض والتواريخ والمنصة. لماذا هذه الصرامة؟ إن غيّرت نيكا الخطاف والسعر والموسيقى معًا وارتفعت المبيعات، فلن تعرف ما الذي نجح ولن تستطيع تكرار النجاح. وإن أطلقت A يوم الاثنين وB يوم الجمعة، فالفائز ليس الإعلان بل يوم الأسبوع. لذلك استخدم الأدوات المدمجة: في Meta اختبارات A/B، وفي Google Ads التجارب، وفي TikTok اختبار التقسيم. فهي توزّع الناس بحيث لا تتداخل المجموعتان.
كم تحتاج من البيانات
ارمِ عملة 10 مرات. قد يظهر الوجه 7 مرات والكتابة 3 مرات رغم أن العملة عادلة. أما في 1000 رمية فستكون النتيجة نحو 500 مقابل 500. والإعلانات كذلك. إن حققت النسخة A ثلاث مبيعات وB خمسًا، فهذا ليس فوزًا لـB بعد، بل تذبذب عشوائي عادي. كلما قلّت الأحداث زاد الضجيج. ماذا تفعل عمليًا؟ أولًا: اختر مقياسًا تكثر فيه الأحداث. إن كانت المبيعات قليلة فقارن النقرات إلى المتجر أو الإضافات إلى السلة. ثانيًا: لا توقف الاختبار قبل أن تجمع كل نسخة بضع عشرات من هذه الأحداث على الأقل. ثالثًا: انظر إلى ما تقوله أداة المنصة المدمجة. فـMeta مثلًا تُظهر مدى احتمال أن يفوز الفائز مجددًا لو كُرِّر الاختبار.
فخ اليوم الأول
أكثر الأخطاء شيوعًا هو التلصص وإيقاف الاختبار بمجرد أن تتقدم إحدى النسختين. في اليوم الأول البيانات قليلة، والمتصدر غالبًا عشوائي. وبعد أسبوع قد يختفي الفرق أو حتى ينقلب. لذلك تُحدَّد مدة الاختبار مسبقًا، عادةً أسبوع على الأقل، ليشمل أيام العمل وعطلة نهاية الأسبوع. والفخ الثاني نتيجة جميلة أكثر من اللازم. يسمي باحثو التجارب في مايكروسوفت ذلك قانون تويمان: إن بدا رقم جيدًا بشكل لا يُصدَّق، فالأرجح أن هناك خطأ ما. تذكّر Bing: بحثوا أولًا عن الخلل ثم فرحوا. افعل مثلهم: إن جلب إعلان جديد فجأة 5 أضعاف المبيعات، فافحص البكسل والروابط، وتأكد أن الخصم لم يصل إلى مجموعة واحدة فقط.
سجل الاختبارات: ذاكرة الفريق
الاختبار الواحد سطر واحد من المعرفة. وعشرة اختبارات فهمٌ حقيقي لجمهورك، لكن بشرط أن تدوّنها. أنشئ جدولًا بسيطًا: الفكرة، وما الذي غيّرته، ومدة الاختبار، والنتيجة، والقرار. المثال أدناه مُتخيَّل: اختبرت نيكا خطاف السؤال فلم يظهر فرق، فذهبت الفكرة إلى الأرشيف. ونجح وضع السعر في أول لقطة أكثر، فأضافته إلى كل الفيديوهات. واختبار «مراجعة زبون مقابل تصوير استوديو» ما زال جاريًا. بعد شهرين يجيب هذا السجل عن أسئلة كان الناس يتجادلون فيها ساعات. وتذكّر: «لا فرق» نتيجة أيضًا، فهي توفّر المال لأنك تتوقف عن إضاعة الوقت على تلك الفكرة.
اصنعها بنفسك: أول اختبار نزيه
خذ أفضل إعلان لديك واكتب فرضية واحدة بصيغة «إذا X فسيحدث Y لأن Z». مثلًا: «إذا عرضنا السعر في أول لقطة ستزيد النقرات، لأن الناس يعرفون فورًا إن كان المنتج في متناولهم». اصنع نسخة B لا تختلف إلا في ذلك. أطلقها عبر اختبار A/B المدمج في المنصة، لا كحملتين منفصلتين. دوّن المدة مسبقًا، أسبوعًا على الأقل، والمقياس الرئيسي. لا تتلصص قبل الموعد. وفي النهاية دوّن النتيجة في السجل حتى لو لم يكن هناك فائز. أعد قراءة السجل مرة في الشهر: ستظهر أنماط تصبح قواعدك الخاصة.
اختبر نفسك
- ماذا تفعل نيكا؟
الإجابة الصحيحة: الانتظار حتى نهاية الأسبوع كما خططت. يوم واحد يعطي بيانات قليلة، والمتصدر غالبًا عشوائي. تُحدَّد المدة مسبقًا ولا يُتلصص، ليشمل الأسبوع أيام العمل والعطلة. - أي استنتاج نزيه؟
الإجابة الصحيحة: البيانات قليلة: نقارن النقرات أو نجمع مبيعات أكثر. ثلاث مبيعات مقابل خمس تذبذب عشوائي عادي، مثل 7 وجوه من 10 رميات. نحتاج أحداثًا أكثر أو مقياسًا تكثر فيه الأحداث. - ما الخطأ في هذا الاختبار؟
الإجابة الصحيحة: فروق كثيرة: لا يُعرف ما الذي نجح. تغيّر الخطاف والسعر والموسيقى معًا. هناك نمو، لكن نيكا لا تعرف سببه ولن تستطيع تكراره. فرق واحد لكل اختبار. - ما أول ما يجب فعله؟
الإجابة الصحيحة: فحص البكسل والروابط والخصومات في المجموعتين. هذا قانون تويمان: النتيجة الجيدة أكثر من اللازم تعني غالبًا خطأ. Bing أيضًا بحث عن الخلل أولًا ثم فرح.
← وسم الذكاء الاصطناعي وقواعد المنصات الحملات الآلية: Advantage+ وPMax وAI Max وSmart+ →