اختبار الكرياتيف في الاعلانات: متغير واحد وحجم عينة حقيقي

كل ممارس تقريباً يقول إنه بيختبر الكرياتيف. لو سألته عن آخر اختبار خلص، الإجابة غالباً بتكون: شغّلنا تلات فيديوهات، واحد منهم اشتغل، وقفنا التانين. ده مش اختبار، ده ملاحظة. والفرق بينهم هو الفرق بين قرار تقدر تكرره وقرار اتعمل على أساس صدفة.

المشكلة الحقيقية مش في اختيار الفائز. المشكلة إن أغلب الاختبارات بتنتهي قبل ما الأرقام تبقى قابلة للاستخدام أصلاً، والسبب موجود مكتوب في توثيق المنصة نفسها.

التعديل الجوهري: النقطة اللي بيقع فيها معظم الاختبارات

توثيق ميتا بيعرّف التعديل الجوهري (significant edit) بأنه إيقاف المجموعة الإعلانية أو إجراء تغيير في حدث التحسين أو الجمهور أو الكرياتيف، ويضيف أن تغييرات استراتيجية المزايدة أو الميزانية ممكن تكون جوهرية كمان حسب حجم التغيير. وبيوضح أن آخر تعديل جوهري قد يعيد تشغيل مرحلة التعلم. المرجع هو صفحة Significant Edits and Learning Phase.

اقرأ الجملة دي تاني وانت مفكر في طريقتك في الاختبار. الكرياتيف نفسه مذكور بالاسم كتعديل جوهري. يعني كل مرة بتضيف أو بتغيّر إعلان جوه مجموعة شغالة، إنت مش بتضيف متغير لتجربة مستقرة، إنت بتحرك الأرضية اللي التجربة واقفة عليها.

قاعدة الـ 50 حدث، وهي مش رقم بيتقال في المحاضرات

توثيق ميتا في صفحة About learning limited بيذكر أن المجموعة الإعلانية بتدخل حالة learning limited لما يكون من غير المرجح إنها تحصل على نحو 50 حدث تحسين في الأسبوع التالي لآخر تعديل جوهري، وأن المجموعة بتخرج من الحالة دي لما توصل لـ 50 حدث تحسين من آخر تعديل جوهري.

وبيحدد أسباب الوقوع في الحالة دي: حجم جمهور صغير، ميزانية منخفضة، سقف تكلفة أو مزايدة منخفضة، تداخل عالي في المزاد، حدث تحسين نادر، أو تشغيل عدد كبير من الإعلانات في نفس الوقت. آخر سبب في القائمة ده تحديداً هو اللي بيعمله معظم من يظن أنه بيختبر.

النتيجة العملية: لو مجموعتك بتجيب 20 عملية شرائية في الأسبوع وحطيت فيها ستة إعلانات، إنت مش عندك ستة اختبارات. عندك اختبار واحد فاشل، لأن الميزانية اتقسمت لدرجة إن ولا إعلان هيوصل لحجم بيانات يخلي الرقم بتاعه يعني حاجة.

يعني إيه متغير واحد فعلاً

التوصية المتداولة هي غيّر متغير واحد في المرة. صحيحة، وناقصة، لأن الناس بتطبقها على مستوى الإعلان وبتنسى إن المجموعة نفسها اتغيرت.

• متغير الكرياتيف: الهوك، أو الصورة، أو الشكل. واحد بس.
• كل حاجة تانية ثابتة: نفس الجمهور، نفس حدث التحسين، نفس استراتيجية المزايدة، نفس الميزانية.
• ومهم: ما تعدلش الميزانية في نص الاختبار. حسب التوثيق، ده احتمال يكون تعديلاً جوهرياً بحسب حجم التغيير، ولو حصل فالمقارنة قبل وبعد بقت مقارنة بين حالتين مختلفتين.

الحساب اللي المفروض تعمله قبل ما تشغّل

قبل الاختبار، اقسم: عدد أحداث التحسين المتوقعة في الأسبوع على عدد الإعلانات اللي ناوي تختبرها. لو الناتج أقل بكتير من 50 لكل إعلان، إنت مش هتوصل لنتيجة صالحة في المدة دي، وعندك تلات اختيارات صادقة فقط.

الاختيار التالت ده مذكور في توثيق ميتا كواحد من الحلول: تغيير حدث التحسين لحدث بيحصل بتكرار أكبر، زي الانتقال من الشراء إلى الإضافة إلى السلة. وهو حل حقيقي بشرط تفتكر إنك دلوقتي بتختبر على إشارة أضعف، وإن الفائز على إضافة السلة مش بالضرورة الفائز على الشراء.

امتى تقرأ النتيجة

التوثيق بيدي مؤشراً مباشراً هنا: لو هتستخدم تكلفة حدث التحسين لتحديد سقف التكلفة، يُنصح بالانتظار حتى تحصل المجموعة على نحو 50 حدث تحسين منذ آخر تعديل جوهري، لأن التكاليف بتكون أكثر استقراراً عند النقطة دي. نفس المنطق ينطبق على قراءة نتيجة اختبار: قبل الاستقرار، الرقم بيتحرك لأسباب مالهاش علاقة بالكرياتيف.

وده بيدي إجابة على سؤال متى نوقف الاختبار: مش بعد يومين، ومش بعد أسبوع لأن الأسبوع رقم لطيف. بعد ما كل إعلان يوصل لحجم بيانات معقول، أو بعد ما يتضح إنه مش هيوصله وقتها القرار هو إعادة تصميم الاختبار مش إعلان فائز.

حدود صادقة

حاجتين لازم تتقال بوضوح. الأولى إن الرقم 50 في توثيق ميتا مذكور كتقدير تقريبي مرتبط بخروج المجموعة من مرحلة التعلم، وهو مش عتبة دلالة إحصائية بالمعنى الدقيق. هو أرضية عملية للحد الأدنى، مش شهادة إن الفرق اللي شفته حقيقي.

التانية إن أغلب الحسابات الصغيرة والمتوسطة في السوق المصري والخليجي مش بتقدر تعمل اختبار كرياتيف نظيف على مستوى الشراء، والاعتراف بده أنفع من التظاهر بالعكس. لو حسابك من دول، الأفضل تاخد قرارات الكرياتيف على أساس إشارات أسرع زي معدل الاستمرار في المشاهدة ونسبة النقر، وتعتبرها مؤشرات مش أحكاماً، وتحتفظ بقرار الشراء لما تتجمع بيانات كافية عبر فترة أطول.

والتالتة اللي بتتنسى: اختبار الكرياتيف مش بيصلح عرضاً ضعيفاً. لو المنتج والسعر والصفحة مش مقنعين، أحسن كرياتيف هيجيب زيارات أرخص لصفحة مش بتحوّل.

خلاصة تنفيذية

احسب أحداث التحسين المتوقعة قبل ما تبدأ. قلّل عدد الإعلانات لحد ما كل واحد يستحق بيانات. ثبّت كل حاجة غير المتغير اللي بتختبره، وما تلمسش الميزانية في النص. استنى لحد ما الأرقام تستقر بدل ما توقف الاختبار عند أول فرق ظاهر. ولو الحساب أصغر من كده، قول كده بصراحة واستخدم إشارات أسرع بدل ما تخترع يقيناً مش موجود.

الجزء الخاص بجودة الكرياتيف نفسه، مش منهجية اختباره، اتناولته في أثر الإبداع الإعلاني على أداء إعلانات السوشيال ميديا. وهيكلة الحساب اللي بتحدد أصلاً هل عندك أحداث كافية ولا لأ اتكلمت عنها في هيكلة حملات ميتا الرابحة، ولو الأرقام اللي بتقارن بيها أصلاً مش مطابقة للمبيعات الحقيقية فالمشكلة أسبق من الاختبار وهي في الفرق بين ROAS المنصة والمبيعات الحقيقية. أما لما الأتمتة بتاخد قرار توزيع الكرياتيف من إيدك، فده موضوع تحديثات Advantage+ في ميتا.