كيف تختبر عدة نسخ إبداعية بكفاءة: افصل الاختبار عن توزيع الميزانية
معظم ما يُسمى اختباراً إبداعياً في الحسابات التي نراجعها ليس اختباراً. خمس نسخ توضع في مجموعة إعلانية واحدة، ثم يُقرأ بعد أسبوع أيها حصل على أقل تكلفة نتيجة. هذا توزيع ميزانية، لا اختبار، والفرق بينهما ليس لفظياً.
السبب بسيط: النسخ الخمس في نفس المجموعة تستهدف نفس الجمهور، أي أنها تتنافس على عرض نفسها لنفس الشخص. النظام يحوّل الميزانية سريعاً إلى النسخة التي تبدأ بأداء أفضل في أول ساعات، فتحصل على بيانات كافية لنسخة واحدة وبيانات هزيلة لأربع. ثم تستنتج أن النسخة الأولى هي الأفضل، وأنت في الحقيقة تقرأ قرار المزاد في أول يوم لا جودة الفكرة.
التمييز الذي يحل هذا موثق، لا رأي. توثيق ميتا للاختبار المقسَّم ينص على أن الاختبار يقسم الجمهور إلى مجموعات متباعدة تماماً دون أي تداخل. هذه الكلمة، التباعد، هي كل الفرق: النسخة أ تُعرض لأشخاص لن تُعرض لهم النسخة ب أبداً، فلا تتنافسان ولا تسرق إحداهما بيانات الأخرى.
عملياً: إن أردت أن تعرف أي فكرة أفضل، تحتاج تجربة مقسَّمة. وإن أردت فقط أن ينفق الحساب على أفضل ما لديك، فضع النسخ معاً واترك النظام يختار. الخطأ هو أن تفعل الثاني وتسمّيه الأول، ثم تبني قراراً إبداعياً لثلاثة أشهر على رقم لا يحمله.
السقف الموثق: من خليتين إلى خمس خلايا، وإعلان واحد في كل خلية
توثيق ميتا للاختبار المقسَّم في واجهة التسويق (بالإنجليزية) يحدد شكل اختبار الكرياتيف تحديداً: من خليتين إلى خمس خلايا، وإعلان واحد بالضبط في كل خلية، ونسب التقسيم يجب أن يكون مجموعها مئة في المئة.
الرقم الأعلى هنا، خمس، يستحق الانتباه لأنه يُقرأ عادة بالعكس. الناس يرونه تصريحاً باختبار خمس نسخ معاً، وهو في الحقيقة سقف: أكثر من خمس لا يُقبل أصلاً. والأهم أن كل خلية تحصل على نصيب من الجمهور والميزانية، فخمس خلايا تعني خمس الميزانية لكل فكرة. على ميزانية صغيرة، خمس خلايا هي الطريق الأسرع إلى خمس نتائج لا تدل على شيء.
قيد «إعلان واحد بالضبط في كل خلية» يغلق بابه الخاص أيضاً. لا يمكنك أن تضع ثلاث نسخ من الفيديو في خلية وثلاثاً في أخرى وتسمّي ذلك اختبار أسلوبين. الوحدة التي تُقارن هي الإعلان، واحداً لواحد.
التوثيق يضيف شرطاً تشغيلياً يُنسى: في اختبارات الكرياتيف، يجب أن يتطابق وقت التهدئة ووقت نهاية المراقبة مع وقت البداية والنهاية. أي أن نافذة القياس هي نافذة التشغيل نفسها، فلا توجد أيام إضافية تُجمع فيها نتائج متأخرة.
- اختبار الكرياتيف: خليتان كحد أدنى، خمس كحد أقصى.
- إعلان واحد في كل خلية، لا أكثر.
- مجموع نسب التقسيم مئة في المئة.
- الجمهور مقسَّم بتباعد تام، فلا تداخل بين الخلايا.
تريد أن تعرف هل تجاربك الحالية مقسَّمة فعلاً أم نسخ تتنافس في مجموعة واحدة؟
تشخيص مجاني لحسابكمتغير واحد في كل تجربة، وهذه أغلى قاعدة تُخالف
التوثيق صريح في هذه النقطة: اختر متغيراً واحداً فقط لكل تجربة، حتى يكون سبب أي فرق في الأداء واضحاً. الصياغة بسيطة والمخالفة شبه عامة.
النسخة التي تُقارن عادة في الحسابات ليست نسخة واحدة مختلفة. هي فيديو آخر بمشهد افتتاحي آخر وصوت آخر ونص آخر على الشاشة وعنوان آخر. إن فاز، فأنت لا تعرف أي من الخمسة أفاد، ولا تستطيع تكرار الفوز في الفيديو القادم. التجربة أعطتك رقماً ولم تعطك معرفة، والمعرفة هي الشيء الوحيد الذي يتراكم.
التوثيق يضيف شرطين يُحوِّلان القاعدة إلى عمل: أحجام التجربة يجب أن تكون قابلة للمقارنة، خاصة في مؤشرات الحجم مثل التحويلات، وأحجام الجمهور والميزانيات يجب أن تكون متناسبة، وإلا لا يمكن مقارنة النتائج بإنصاف. أي أن خلية بثلاثة أرباع الميزانية ستجمع تحويلات أكثر بحكم الحساب لا بحكم الفكرة.
وشرطان آخران يسبقان الإطلاق: يُتفق على نموذج الإحتساب قبل بدء التجربة، وتُحدَّد مؤشرات الأداء قبل إنشائها. الترتيب مقصود. من يحدد المؤشر بعد رؤية الأرقام يجد دائماً مؤشراً يفوز به ما يحبه.
القياس نفسه موضوع منفصل يسبق الكرياتيف كله: إن كانت نافذة الإحتساب عندك غير واضحة، ابدأ من دليلنا عن قياس أداء الفيديو القصير وأي مؤشر يهم بعد تغيّر التعريفات قبل أن تطلق أي تجربة.
ما لا توثقه ميتا: لا حد أدنى للمدة ولا عتبة للدلالة
هذه الفقرة أهم ما في المقال، وهي الأقل تداولاً. صفحة التوثيق لا تذكر حداً أدنى للمدة، ولا تشرح طريقة لحساب الدلالة الإحصائية، ولا تعطي عتبة احتمال. ما تقوله حرفياً هو أن الجداول الأطول والوصول الأوسع والميزانيات الأعلى تميل إلى إنتاج نتائج أكثر دلالة. تميل، لا تضمن.
المثال المذكور في التوثيق لاختبار كرياتيف يعمل سبعة أيام، لكنه مُقدَّم كمثال لا كشرط. وهذا يفسّر مصدر الرقم المتداول «شغّل سبعة أيام»: هو مثال في وثيقة، تحوّل بالتكرار إلى قاعدة.
التوثيق يقول كذلك إن مستوى الثقة يُحدَّد قبل إنشاء التجربة، دون أن يشرح كيف يُضبط في الواجهة. والنتيجة العملية: أي رقم تسمعه بثقة عن «٩٥٪ دلالة» في تجربة إعلانات على ميتا ليس رقماً من المنصة، بل تقدير من كاتب. نحن لا نعطي مثل هذا الرقم لعميل، ولا نقبله في تقرير.
كيف يُحدَّد الفائز إذن؟ التوثيق يجيب: الفائز هو النسخة ذات أفضل مؤشر كفاءة للهدف المختار، مثل أقل تكلفة لكل إجراء في أهداف التحويل. وإن اختلفت أحجام المجموعات أو الجماهير اختلافاً كبيراً، فالتوصية هي تعديلها لتصبح قابلة للمقارنة، وإن لم تكن الميزانية متناسبة مع حجم المجموعة فيجب النظر إلى حجم النتائج أيضاً لا إلى التكلفة وحدها.
وللأثر السببي الحقيقي، أي هل أحدث الإعلان البيع أم رافقه، يحيل التوثيق إلى التواصل مع مندوب ميتا لتشغيل دراسة رفع. هذا باب مختلف شرحناه في اختبار الرفع وقياس الأثر الحقيقي للإعلان، ومن المفيد معرفة أن اختبار الكرياتيف لا يدّعي الإجابة عليه.
السقوف الرقمية، وأماكن لا يعمل فيها الاختبار أصلاً
التوثيق يعطي حدوداً صريحة تستحق أن تُعرف قبل بناء خطة تجارب لحساب كبير:
- مئة دراسة متزامنة كحد أقصى لكل معلن.
- مئة وخمسون خلية كحد أقصى في الدراسة الواحدة.
- مئة كيان إعلاني كحد أقصى في الخلية الواحدة.
وهناك قيد من نوع آخر، أهم للممارسين: بعض أماكن الظهور لا تقبل الاختبار المقسَّم على الإطلاق. توثيق ميتا للإعلانات في حالة واتساب (بالإنجليزية) ينص على أن اختبار A/B والتحسين الإبداعي الديناميكي وشراء الوصول والتكرار كلها غير متوافقة مع هذا المكان، وأن أدوات Advantage+ الإبداعية غير متاحة فيه.
النتيجة التي تهم عند بناء خطة: طريقة قياسك تقيّد أماكن ظهورك. إن كانت خطتك الإبداعية مبنية على تجارب مقسَّمة، فإن إضافة مكان ظهور لا يدعمها تعني أن ذلك الجزء من الإنفاق يخرج من نظام القياس. هذا قرار مقبول، لكنه يجب أن يكون قراراً واعياً لا مفاجأة في تقرير آخر الشهر.
وفي الاتجاه المقابل، التنويع الشكلي لنفس الفكرة عبر المنصات لا يحتاج تجربة جديدة لكل منصة. المواصفات والمقاسات مسألة إنتاج لا مسألة قياس، وفصّلناها في كيف تعيد استخدام فيديو واحد على كل المنصات دون إعادة تصوير.
تريد خطة تجارب إبداعية مبنية على ميزانيتك الحقيقية بدل خمس خلايا على ميزانية لا تحملها؟
اطلب خطة مجانيةترتيب تشغيلي: ما يفعله حساب صغير وما يفعله حساب كبير
القواعد نفسها، والتطبيق مختلف تماماً باختلاف الميزانية. الفرق ليس في الطموح بل في عدد الخلايا التي تستطيع تمويلها.
ميزانية صغيرة: خليتان فقط
خليتان، خمسون في مقابل خمسين، ومتغير واحد واضح. ليست تواضعاً بل حساب: خمس خلايا على ميزانية صغيرة تعطي خمس نتائج لا تُقرأ. اختبار واحد في الوقت الواحد.
اختر المتغير الأغلى أولاً
ابدأ بالمتغير الذي يغيّر الإنتاج كله لا بالتفاصيل: الزاوية أو الوعد أو شكل الافتتاحية. اللون والخط يختبران بعد أن تثبت الزاوية، لا قبلها.
اكتب المؤشر والنموذج قبل الإطلاق
مؤشر واحد، ونموذج الإحتساب، ونسب التقسيم، ومدة التشغيل. مكتوبة قبل أن تُضغط زر النشر، لأن التوثيق نفسه يشترط تحديدها مسبقاً.
ميزانية كبيرة: تجارب متوازية لا خلايا أكثر
الحساب الذي يحمل أكثر يوسّع بعدد التجارب، كل واحدة بمتغير واحد، لا بحشو خلايا في تجربة واحدة. السقف يسمح بمئة دراسة متزامنة.
وزّع الجمهور والميزانية بالتناسب
خلايا متناسبة في حجم الجمهور والميزانية، وإلا فالمقارنة غير منصفة. وإن لم تتناسب، اقرأ حجم النتائج لا تكلفتها فقط.
سجّل الخلاصة لا الفائز
بعد كل تجربة اكتب جملة واحدة عن المتغير وأثره. بعد عشر تجارب يصير عندك دفتر قرارات إبداعية، وهو أثمن من عشرة فائزين منسيين.
وإن كان ما تريد اختباره هو الصفحة التي يصل إليها الإعلان لا الإعلان نفسه، فذلك مسار منفصل بقواعد مختلفة شرحناه في كيف تجري اختبار A/B على صفحة الهبوط بنتيجة يمكن الوثوق بها. خلط الاثنين في نافذة واحدة يفسد كليهما.
وللمقارنة بمنصة أخرى، تحليل مصطفى فريد عن العدد والمدة وقرار الإيقاف في تجارب الكرياتيف على تيك توك يشرح كيف تختلف نفس الأسئلة على منصة تملك قواعد توزيع مختلفة.
الحدود بصراحة: ثلاثة أشياء لا يفعلها هذا الترتيب
أولاً، التجربة المقسَّمة لا تقول لك إن الإعلان أحدث البيع. تقول أي نسخة كانت أكفأ داخل نافذة التجربة بمؤشرها المختار. السؤال السببي يحتاج دراسة رفع، والتوثيق نفسه يحيل عليها عبر مندوب ميتا، أي أنها ليست متاحة لكل حساب.
ثانياً، لا يوجد رقم موثق يقول متى تصبح النتيجة موثوقة. من يعطيك عتبة دلالة محددة لتجربة على ميتا يعطيك تقديره لا توثيق المنصة. هذا لا يعني أن التجارب بلا قيمة، يعني أن فرقاً صغيراً بين خليتين على ميزانية صغيرة ليس نتيجة، وأن تكرار النتيجة على جمهور آخر أقوى من أي حساب ثقة على عيّنة واحدة.
ثالثاً، أكثر الحسابات التي نراجعها لا تحتاج اختباراً أفضل، تحتاج نسخاً مختلفة فعلاً. اختبار متقن بين فيديوهين يقولان نفس الشيء بنفس الزاوية سيعطيك فرقاً صغيراً صادقاً وبلا قيمة. الاختبار يفرز الأفكار، ولا يصنعها، وإن كان لديك فكرة واحدة بخمس تنفيذات فأنت تحتاج أفكاراً لا خلايا.
وتوصية صريحة: إن كانت ميزانيتك الشهرية لا تسمح بأكثر من بضع عشرات من النتائج في الشهر، فلا تبنِ نظام تجارب أصلاً. شغّل أفضل ما لديك، واجمع التعلم من التعليقات والمحادثات ومعدل البقاء على الفيديو، وأجّل التجارب المقسَّمة إلى حين يصبح الحساب قادراً على تمويل خليتين بشكل يُقرأ. بناء نظام قياس أكبر من الحساب يكلّف وقتاً ولا يعيد معرفة.