تخطّ إلى المحتوى الرئيسي

اختبار A/B للحملات

يتيح لك اختبار A/B تجربة إصدارات مختلفة من حملاتك لمعرفة الأفضل أداءً وتحسين رسائلك.

ما هو اختبار A/B؟​

يرسل اختبار A/B، ويُسمى أيضًا split testing، إصدارات مختلفة من حملتك إلى شرائح مختلفة من جمهورك لتحديد الإصدار الأفضل.

مثال:

  • Variant A: "Get 20% off your first purchase".
  • Variant B: "Save $10 on your first order".

أرسل كلًا منهما إلى 50% من جمهورك واعرف أيهما يحقق تحويلًا أعلى.

متى تستخدم اختبار A/B​

أسطر الموضوع، Email​

اختبر أسطر موضوع مختلفة لتحسين معدلات الفتح:

Variant A: "Your exclusive discount inside"
Variant B: "Save 20% today only"
Variant C: "Limited time offer for you"

محتوى الرسالة​

اختبر نصوصًا مختلفة:

Variant A: شرح طويل للمزايا
Variant B: رسالة قصيرة وقوية مع CTA
Variant C: سرد قصصي

دعوة الإجراء​

اختبر CTAs مختلفة:

Variant A: "Shop Now"
Variant B: "Get My Discount"
Variant C: "Start Shopping"

التوقيت​

اختبر أوقات إرسال مختلفة:

Variant A: Monday 9 AM
Variant B: Wednesday 2 PM
Variant C: Friday 6 PM

معلومات المرسل​

مرسل Email لكل نسخة: تضبط كل نسخة A/B مرسلها وFrom وReply-To وBCC في تبويب Settings، قسم Sender، في محرر النسخة. لذلك يمكنك اختبار سطر From، وهو من أكبر عوامل معدل الفتح:

Variant A: From "John at Company" <john@company.com>
Variant B: From "Company Team" <team@company.com>
Variant C: From "Company" <hello@company.com>

تأتي عناوين المرسلين وReply-To وBCC القابلة للاختيار من القوائم المدارة لمساحة عملك. راجع إعدادات Email.

إنشاء اختبار A/B​

تُنشأ نسخ A/B داخل غلاف VariantTabs في خطوة Compose، وهو الغلاف نفسه في كل القنوات. أضف نسخًا بالنقر على + Add variant في نهاية شريط التبويبات، ثم أنشئ نص كل تبويب كما تنشئ حملة بنسخة واحدة.

الخطوة 1: افتح معالج الحملة​

  1. انتقل إلى Campaigns ← New Campaign.
  2. املأ خطوة Details.
  3. اضبط Delivery، أو منتقي مشغّل Delivery لحملات In-app.

الخطوة 2: أضف النسخ في Compose​

تبدأ خطوة Compose بتبويب نسخة واحدة باسم A. انقر + Add variant لإضافة تبويب ثانٍ، B، ثم مجددًا لنسخ إضافية. يحمل كل تبويب:

  • نقطة ملونة للتعريف البصري السريع.
  • شارة وزن للقراءة فقط؛ التوزيع في بطاقة A/B أدناه.
  • نقطة كهرمانية إن لم تُنشأ النسخة بعد.

لنسخ Email وIn-app استخدم منتقي الطرق ذي البطاقات الثلاث، Drag & Drop / HTML editor / Use template، في كل تبويب. تقبل تبويبات SMS وPush نص القناة مباشرة. وتتيح تبويبات WhatsApp ربط قالب مختلف لكل نسخة.

الخطوة 3: اضبط توزيع الأوزان​

تحتوي بطاقة A/B Allocation أسفل التبويبات على إدخال بوحدة % لكل نسخة. يجب أن يساوي مجموع الأوزان لكل النسخ 100%.

Variant A: 50%
Variant B: 50%

أو قسّم على نسخ أكثر:

Variant A: 33%
Variant B: 33%
Variant C: 34%

إذا أضفت مجموعة تحكم، يبقى وزنها ثابتًا عند إضافة نسخ الرسائل أو إزالتها؛ ولا يعاد توزيع سوى النسخ غير الضابطة ضمن الميزانية المتبقية. إن أزلت كل نسخ الرسائل، تبقى مجموعة التحكم ويظهر Total Weight validator الفجوة حتى تعيد إضافة نسخة.

الخطوة 4: اختر قاعدة الإيقاف وطريقة التحسين​

تكشف بطاقة A/B أيضًا عن:

  • Stopping rule preset: Quick، مهلة 4h، أو Standard، مهلة 24h، أو Custom. كلا الإعدادين المدمجين يوقفان مبكرًا عند الدلالة الإحصائية.
  • Optimization method: مقفلة بشارة "Needs 2+ variants" حتى تضيف نسخة ثانية. يؤدي النزول لأقل من نسختين إلى إعادة ضبط الطريقة تلقائيًا إلى none.

اختيار طريقة التحسين​

الطريقةما تفعلهمتى تستخدمها
No OptimizationA/B عادي: تقسيم متساوٍ وتقرأ النتائجتريد مقارنة النسخ واتخاذ القرار يدويًا
Winning Variantاختبر على شريحة ثم أرسل الأفضل تلقائيًا للجميعإرسال لمرة واحدة تريد اختيار الفائز فيه تلقائيًا
Personalized Variantيختار AI أفضل نسخة لكل مستخدم من تاريخهحملات متكررة أو محتوى معاد استخدامه؛ تخصيص لكل شخص لا فائز عالمي واحد

عن Personalized Variant، البداية الباردة والتسخين: يتعلم AI من النتائج، والنتائج تحتاج وقتًا للوصول، ساعات للنقرات وأيامًا للتحويلات. لذلك لا تُخصص مجموعة نسخ جديدة تمامًا في أول إرسال؛ تعمل كـ A/B عادي، تقسيم متساوٍ مع مجموعة حجب عشوائية لقياس الرفع، ثم تتخصص تلقائيًا مع تراكم النتائج. لهذا تناسب الحملات المتكررة والعروض المعاد استخدامها، حيث يكون النموذج دافئًا. أما إرسال دفعة واحدة لنسخ جديدة فهو A/B قياسي يغذي التعلم القادم. تعرض الحملة ملاحظة "personalization is warming up" حتى يتعلم النموذج نسخها.

الخطوة 5: اختر مقياس الفوز​

اختر المقياس الذي يحدد الفائز:

  • Open Rate، Email فقط: نسبة من فتحوا Email.
  • Click Rate: نسبة من نقروا أي رابط.
  • Conversion Rate: نسبة من أكملوا حدث الهدف.
  • Revenue: إجمالي الإيراد المتولد، يتطلب تتبع التحويل.

الخطوة 6: مدة الاختبار​

يحمل إعدادا Quick / Standard مهلًا مناسبة، 4h / 24h. للاختبارات الأطول استخدم Custom لضبط مهلة وحجم عينة أدنى خاصين بك.

الخطوة 7: النشر​

انقر Publish في رأس المعالج. يعالج محرك A/B تعيين النسخ باستخدام تجزئة حتمية، hash(userId + campaignId)، فيرى المستخدم نفسه النسخة نفسها عبر إعادة الإرسال.

توفر A/B حسب القناة​

تظهر بطاقة A/B لكل قناة تعتمد النسخ: Email وSMS وWhatsApp وWebhook وPush وIn-app. كانت حملات Push القديمة تحفظ نصًا واحدًا على مستوى الحملة؛ وعند تحريرها تُحمّل إلى نسخة Main واحدة، وهذا ما يتيح اختبار A/B لـ Push الآن.

أمثلة اختبارات A/B​

المثال 1: اختبار سطر الموضوع، Email​

الهدف: تحسين معدل الفتح.

الإعداد:
- Variant A: "Your monthly newsletter"
- Variant B: "5 tips to boost productivity"
- الزيارات: 50% / 50%
- مقياس الفوز: Open rate
- المدة: 24 ساعة

النتائج:
- Variant A: 15% open rate
- Variant B: 28% open rate ← Winner

الاستنتاج: Emoji وعرض قيمة محدد يحققان أداءً أفضل

المثال 2: اختبار دعوة الإجراء​

الهدف: تحسين click-through rate.

الإعداد:
- Variant A: زر "Learn More"
- Variant B: زر "Get Started Free"
- Variant C: زر "Try It Now"
- الزيارات: 33% / 33% / 34%
- مقياس الفوز: Click rate
- المدة: 48 ساعة

النتائج:
- Variant A: 5.2% CTR
- Variant B: 8.7% CTR ← Winner
- Variant C: 6.1% CTR

الاستنتاج: التأكيد على "free" يزيد النقرات

المثال 3: اختبار طول المحتوى​

الهدف: تحسين معدل التحويل.

الإعداد:
- Variant A: نص طويل، 500 كلمة
- Variant B: نص قصير، 100 كلمة
- الزيارات: 50% / 50%
- مقياس الفوز: Conversion rate
- المدة: 7 أيام

النتائج:
- Variant A: 2.1% conversion
- Variant B: 3.8% conversion ← Winner

الاستنتاج: النص الموجز يحول بشكل أفضل لهذا الجمهور

المثال 4: اختبار التوقيت، SMS​

الهدف: تحسين وقت التفاعل.

الإعداد:
- Variant A: إرسال 9 AM
- Variant B: إرسال 2 PM
- Variant C: إرسال 6 PM
- الزيارات: 33% / 33% / 34%
- مقياس الفوز: Click rate
- المدة: اليوم نفسه

النتائج:
- Variant A (9 AM): 12% CTR
- Variant B (2 PM): 8% CTR
- Variant C (6 PM): 18% CTR ← Winner

الاستنتاج: رسائل المساء الأفضل أداءً لهذا الجمهور

تحليل النتائج​

عرض نتائج الاختبار​

  1. انتقل إلى Campaigns.
  2. انقر حملة اختبار A/B.
  3. اعرض تبويب Variants.

المقاييس المعروضة​

لكل نسخة:

حملات Email:

  • عدد Sent.
  • Delivered %.
  • Open rate %.
  • Click rate %.
  • Conversion rate %.
  • Revenue، عند التتبع.

حملات SMS:

  • عدد Sent.
  • Delivered %.
  • Click rate %.
  • Conversion rate %.
  • Response rate %.

حملات Push:

  • عدد Sent.
  • Delivered %.
  • Open rate %.
  • Click rate %.
  • Conversion rate %.

الدلالة الإحصائية​

يحسب Joryio الدلالة الإحصائية تلقائيًا باستخدام two-proportion z-test وفترات ثقة Wilson Score:

  • تبين فترات الثقة أسفل كل معدل المجال الذي يرجح أن يقع فيه المعدل الحقيقي.
  • تبين شارات الدلالة إن كانت الفروق حقيقية أو عشوائية:
    • أخضر +12.5%: أفضل بدرجة دالة.
    • أحمر -5.2%: أسوأ بدرجة دالة.
    • رمادي p=0.234: غير دال بعد.
  • تبرز وسوما Leader/Winner النسخ الأفضل أداءً والفائز المعلن.
حجم العينة مهم

لنتائج موثوقة، يحتاج كل Variant إلى:

  • 1,000 مستلم على الأقل لاختبارات معدل الفتح/النقر.
  • 100 تحويل لاختبارات معدل التحويل.

للتفاصيل الكاملة لفترات الثقة وقيم p واكتشاف الفائز التلقائي، راجع الدلالة الإحصائية.

إعلان فائز​

إعلان يدوي​

  1. راجع أداء النسخ.
  2. انقر Declare Winner.
  3. اختر النسخة الفائزة.
  4. اختياريًا: أرسل الفائز إلى الجمهور المتبقي.

إعلان تلقائي​

إن فُعّل، يقوم Joryio تلقائيًا بما يلي:

  1. ينتظر مدة الاختبار.
  2. يحسب الدلالة الإحصائية.
  3. يعلن فائزًا إذا تجاوزت الثقة 95%.
  4. يرسل الفائز إلى الجمهور المتبقي، إن ضبطت ذلك.

لا فائز واضح​

إذا كانت النسخ متشابهة الأداء:

  • تابع بأي نسخة.
  • نفذ اختبارًا أطول.
  • اختبر شيئًا مختلفًا.

أفضل الممارسات​

1. اختبر متغيرًا واحدًا​

اختبر عنصرًا واحدًا في كل مرة:

جيد: اختبر سطر الموضوع فقط.

Variant A: "Get 20% off"
Variant B: "Save big today"
نفس المحتوى، نفس CTA

سيئ: اختبر كل شيء.

Variant A: Subject, content, CTA all different
Variant B: Subject, content, CTA all different
لا يمكنك تحديد سبب الفرق!

2. استخدم حجم عينة كافيًا​

تأكد من نتائج ذات معنى:

جيد: 10,000 مستلم = 5,000 لكل نسخة.

سيئ: 200 مستلم = 100 لكل نسخة؛ عينة صغيرة جدًا.

الحد الأدنى الموصى به:

  • معدل فتح Email: 1,000 لكل نسخة.
  • Click rate: 500 لكل نسخة.
  • Conversion rate: 100 تحويل لكل نسخة.

3. شغّل الاختبارات مدة كافية​

راعِ تغيرات أيام الأسبوع وأوقات اليوم:

جيد: 3–7 أيام.

سيئ: إعلان فائز بعد ساعتين.

المدة الموصى بها:

  • Email: 24–72 ساعة.
  • SMS: 4–12 ساعة.
  • Push: 6–24 ساعة.
  • المعتمد على التحويل: 7 أيام.

4. اختبر فروقًا ذات معنى​

اجعل النسخ مختلفة بما يكفي:

جيد:

Variant A: "Save $10"
Variant B: "Get 50% off"
فرق جوهري

سيئ:

Variant A: "Save today"
Variant B: "Save now"
متشابهتان جدًا

5. وثّق ما تعلمته​

احتفظ بسجل نتائج الاختبار:

الاختبار: سطر الموضوع - Emoji مقابل بلا Emoji
التاريخ: Jan 15, 2024
الفائز: With emoji، 28% مقابل 15% فتح
الاستنتاج: Emoji يزيد معدل الفتح 87%
الإجراء: ضمّن Emoji ذا صلة في رسائل Email القادمة

أخطاء شائعة في اختبار A/B​

1. اختبار نسخ كثيرة جدًا​

لا تفعل: 5+ نسخ لجمهور صغير.

افعل: 2–3 نسخ بزيارات كافية لكل منها.

2. إيقاف الاختبارات مبكرًا جدًا​

لا تفعل: إعلان الفائز بعد ساعات قليلة.

افعل: انتظر الدلالة الإحصائية.

3. اختبار كل شيء في الوقت نفسه​

لا تفعل: غيّر الموضوع والمحتوى وCTA والتوقيت معًا.

افعل: اختبر متغيرًا واحدًا كل مرة.

4. تجاهل فروق الشرائح​

لا تفعل: افترض أن النتائج تنطبق على كل الشرائح.

افعل: اختبر ضمن شرائح محددة.

5. عدم تطبيق ما تعلمته​

لا تفعل: نفذ اختبارات ولا تستخدم الاستنتاجات.

افعل: طبّق التكتيكات الفائزة على حملاتك القادمة.

اختبار A/B متقدم​

الاختبار المتسلسل​

اختبر على مراحل:

المرحلة 1: اختبار أسطر الموضوع، الفائز: موضوع مع Emoji
  ↓
المرحلة 2: اختبار أزرار CTA، الفائز: "Start Free Trial"
  ↓
المرحلة 3: اختبار طول المحتوى، الفائز: النص القصير
  ↓
الحملة النهائية: اجمع كل الفائزين

اختبارات خاصة بالشرائح​

اختبر داخل الشرائح:

الاختبار 1: مستخدمو التجربة
- Variant A: ركز على الميزات
- Variant B: ركز على السعر
الفائز: التركيز على السعر

الاختبار 2: المستخدمون المدفوعون
- Variant A: ركز على الميزات ← Winner
- Variant B: ركز على السعر
الفائز: التركيز على الميزات

الاستنتاج: رسائل مختلفة لشرائح مختلفة!

الاختبار متعدد المتغيرات​

اختبر عناصر متعددة، ويتطلب جمهورًا أكبر:

اختبر تركيبات من:
- Subject، A أو B
- CTA، X أو Y

النتيجة 4 نسخ:
1. Subject A + CTA X
2. Subject A + CTA Y
3. Subject B + CTA X
4. Subject B + CTA Y
يلزم جمهور كبير

يقسم الاختبار متعدد المتغيرات الزيارات بين نسخ كثيرة. يحتاج جمهورًا أكبر 10× من اختبار A/B البسيط.

تتبع التحويل​

لاختبار معدلات التحويل، اضبط أحداث التحويل:

  1. انتقل إلى إعدادات الحملة.
  2. فعّل Conversion Tracking.
  3. اختر حدث التحويل:
    • "Order Completed".
    • "Trial Started".
    • "Form Submitted".
  4. اضبط نافذة الإسناد، مثل 7 أيام.

سيتتبع Joryio النسخة التي تقود تحويلات أكثر.

الخطوات التالية​