انتقل إلى المحتوى

تحليل تأثير مجموعة التحكم

تعرض صفحة كل مجموعة تحكم أداء رسائلك مقارنة بتلك المجموعة. افتحها من Settings > Control groups بالنقر على صف المجموعة.

التحقق من وضع المجموعة وتواريخها

Anchor link to

أسفل اسم المجموعة، تعرض الصفحة Group size، وMode، ورقم Cycle الحالية، وتاريخًا يعتمد على الوضع:

الوضعالتاريخ أسفل الاسمتسمية محدد النطاق الزمني
دائمRunning since: تاريخ بدء المجموعةبدون تسمية
التحديث التلقائيRange للدورة الحاليةCurrent cycle
تجربة بتاريخ انتهاءRange للدورة الحاليةCurrent experiment

لعرض نتائج دورة سابقة، افتح محدد النطاق الزمني واخترها ضمن Previous. تُدرج الدورات المنتهية هناك حسب رقمها، باسم Cycle أو Experiment. يمكن أن تكون للمجموعة من النوع الدائم دورات سابقة أيضًا، لأن تغيير الحجم أو النطاق أو تغيير الوضع يبدأ دورة جديدة.

رأس صفحة مجموعة التحكم يعرض Group size وMode وRunning since، مع رابط Recalculate

ما الذي تقارنه الصفحة

Anchor link to

تحتوي الصفحة على كتلتين: جدول مقارنة الأحداث في الأعلى وImpact report أسفله. كلاهما يقارن مجموعتين من المستخدمين على أي حدث تختاره:

  • مجموعة المعالجة (Treatment group): المستخدمون في جمهور المجموعة الذين ليسوا في مجموعة التحكم. يستمرون في تلقي رسائلك التسويقية (Push, Email, In-App, SMS, WhatsApp) كالمعتاد.
  • مجموعة التحكم (Control group): المجموعة المحجوزة التي قمت بتكوينها أعلاه. يتم استبعاد هؤلاء المستخدمين من الرسائل التسويقية، لذا فإن أي اختلاف في سلوكهم لا يتأثر بحملاتك.

يتم سحب كلتا المجموعتين من جمهور المجموعة، المعروض في Measured among في صفحة المجموعة: All users، أو المستخدمون الذين يطابقون بلدان المجموعة وقيم علاماتها اليوم.

  • المستخدم الذي تتغير قيمة علامته يخرج من العدد.
  • يتم تحديث بيانات الدورة الحالية مرة واحدة يوميًا. عند انتهاء دورة، تظهر نتائجها النهائية عادةً ضمن Previous خلال 15 دقيقة.
  • لا يقوم Pushwoosh بتصفية أي من المجموعتين وصولاً إلى المستخدمين الذين لديهم رمز إشعار صالح، أو بريد إلكتروني تم التحقق منه، أو قناة أخرى يمكن الوصول إليها.

تأتي مجموعة المعالجة ومجموعة التحكم من نفس مجموعة المستخدمين، دون تصفية منفصلة بينهما.

مقارنة الأحداث

Anchor link to
  1. حدد نافذة زمنية: Last 3 days، أو Last 7 days، أو Last 30 days. لمقارنة دورة سابقة، اخترها ضمن Previous.

    تبدأ نافذة القياس من جديد، ولا يتم تضمين البيانات السابقة، عندما:

    البيانات من قبل تلك النقطة لم تعد تطابق الأعضاء أو الجمهور الحالي. تُدرج الدورات المنتهية ضمن Previous في محدد النطاق الزمني.

  2. راجع جدول مقارنة الأحداث. يعرض الأحداث تلقائيًا فقط إذا قمت بتعيين أهداف التحويل (Conversion Goals) في Customer Journey. وإلا، يبدأ الجدول فارغًا.

  3. انقر فوق Add events to compare لإضافة أي حدث تريد قياسه. يمكنك إضافة ما يصل إلى 10 أحداث في المجموع.

جدول مقارنة الأحداث للدورة الحالية، مع Conv. Control وConv. Treatment وUplift وSignificance لثلاثة أحداث

يعرض الجدول هذه المقاييس لكل حدث:

المقياسما يعرضه
Conv. Controlحصة المستخدمين الفريدين المحجوزين من الرسائل التسويقية الذين قاموا بتشغيل الحدث مرة واحدة على الأقل على أي حال، دون أي تأثير من الرسائل.
Conv. Treatmentحصة المستخدمين الفريدين الذين تلقوا رسائلك التسويقية (Push, Email, In-App, SMS, WhatsApp) وقاموا بتشغيل الحدث مرة واحدة على الأقل.
Upliftالفرق المئوي بين معدلات التحويل لمجموعة المعالجة والتحكم، بالنسبة لمعدل التحكم. القيمة الإيجابية تعني أن مجموعة المعالجة تحولت بشكل أفضل. يتم حسابها كـ (conv. treatment − conv. control) / conv. control × 100%.
Significanceما إذا كان الفرق موثوقًا به إحصائيًا. راجع الحالات في الجدول التالي.
حالة الدلالةما تعنيه
Significantمن غير المرجح أن يكون الارتفاع بسبب الصدفة.
Not significantالفرق ليس موثوقًا به إحصائيًا بعد.
Not enough dataإحدى المجموعتين لديها أقل من 10 تحويلات أو أقل من 10 عدم تحويلات لهذا الحدث، لذلك لا يمكن حساب الدلالة.

عرض تقرير التأثير (Impact report)

Anchor link to

استخدم القائمة المنسدلة View event لتحديد حدث من الجدول. يعرض Impact report أدناه تفصيلاً أعمق لهذا الحدث.

تقرير التأثير يظهر الارتفاع، والتحويلات المدفوعة بالرسائل، وجدول تفصيلي للمجموعة

المقياسما يعرضه
Uplift (change from control)مدى اختلاف معدل تحويل مجموعة المعالجة عن معدل تحويل مجموعة التحكم. هذه هي نفس القيمة المعروضة في جدول الأحداث.
Conversions driven by messagingالعدد المقدر للأحداث الإضافية التي تم إنشاؤها بواسطة رسائلك بما يتجاوز العدد المتوقع بدون رسائل. تظهر النسبة المئوية هذه الأحداث كحصة من جميع أحداث المعالجة. يتم حسابها كـ (events per user in treatment − events per user in control) × treatment group size.
Significanceما إذا كان الفرق موثوقًا به إحصائيًا: Significant، أو Not significant، أو Not enough data. بناءً على Confidence وP-value.
Confidenceمدى تأكد Pushwoosh من أن الارتفاع يعكس فرقًا حقيقيًا بدلاً من الصدفة، كنسبة مئوية. كلما زادت، كان الدليل أقوى.
P-valueمدى احتمالية ظهور هذا الفرق عن طريق الصدفة إذا لم يكن للرسائل تأثير حقيقي. كلما انخفضت، كان الدليل أقوى.
Z-scoreمدى تباعد أداء المجموعتين. إذا كانت قريبة من 0، فقد يكون الفرق عشوائيًا. كلما ابتعدت عن 0، زادت ثقتك في أن إحدى المجموعتين أفضل.
Group breakdownمجموعة المعالجة ومجموعة التحكم جنبًا إلى جنب: Estimated users، وTotal number of events، وEvents per user، وConv. rate (unique).

كيفية قراءة النتائج

Anchor link to
  • Uplift إيجابي وذو دلالة (Significant): رسائلك تدفع هذا الحدث. استمر في إرسالها.
  • Uplift سلبي وذو دلالة (Significant): مجموعة التحكم تتحول بشكل أفضل من مجموعة المعالجة في هذا الحدث. قبل أن تستنتج أن الرسائل تعمل ضدك، تحقق مما إذا كان هذا الحدث من الأحداث التي يُفترض فعلاً أن تدفعها الرسائل.
  • Not significant: الفرق ليس موثوقًا به بعد، وهذا لا يعني عدم وجود تأثير. اترك الحدث يجمع المزيد من التحويلات قبل الحكم عليه.
  • Not enough data: إحدى المجموعتين لديها أقل من 10 تحويلات أو أقل من 10 عدم تحويلات لهذا الحدث. قارن حدثًا بحجم أكبر، أو انتظر حتى يتكرر أكثر.

أمران آخران يجب مراعاتهما:

  • قارن ضمن نافذة قياس واحدة. إعادة الترتيب، أو تغيير الحجم، أو تغيير النطاق، أو تغيير الوضع، أو انتقال التحديث التلقائي، أو انتهاء التجربة يعيد تشغيل النافذة. النتائج من قبل أحد هذه الأحداث وبعده غير قابلة للمقارنة.
  • اختر الأحداث التي يُفترض أن تدفعها حملاتك، مثل الشراء أو التسجيل، بدلاً من الأحداث التي لا يوجد للرسائل مسار مباشر إليها.