ข้ามไปยังเนื้อหา
เอกสารสำหรับนักพัฒนา การสนับสนุน ขอสาธิต เข้าสู่ระบบ
Pushwoosh.com

กลุ่มควบคุม (Control groups)

กลุ่มควบคุม (Control group) จะยกเว้นผู้ใช้ของคุณในสัดส่วนที่กำหนดไว้จากข้อความทางการตลาดบน Push, Email, In-App, SMS และ WhatsApp Pushwoosh จะเปรียบเทียบผู้ใช้เหล่านั้นกับคนอื่นๆ ในแอปของคุณที่ยังคงได้รับแคมเปญ เพื่อให้คุณสามารถวัดผลได้ว่าการส่งข้อความของคุณได้ผลลัพธ์หรือไม่

ผู้ใช้ในกลุ่มควบคุมยังคงได้รับข้อความธุรกรรมบนช่องทางเหล่านั้นเมื่อคุณตั้งค่าประเภทข้อความตามนั้น

วิธีการทำงานของการเป็นสมาชิกกลุ่มควบคุม

Anchor link to

Pushwoosh ไม่ได้เก็บรายชื่อว่าใครอยู่ในกลุ่มควบคุม แต่ในการตรวจสอบทุกครั้ง จะรวมแอปของคุณ หมายเลขเวอร์ชันกลุ่มปัจจุบัน และ User ID เข้าด้วยกัน แล้วนำไปผ่านสูตรแฮช (hash formula) เพื่อสร้างตัวเลข และตรวจสอบว่าตัวเลขนั้นอยู่ในเปอร์เซ็นต์ที่คุณตั้งไว้หรือไม่ (ตัวอย่างเช่น 5%) ถ้าใช่ ผู้ใช้จะอยู่ในกลุ่มควบคุม ถ้าไม่ใช่ พวกเขาจะไม่อยู่ เนื่องจากเป็นสูตรแทนที่จะเป็นรายการที่บันทึกไว้ การเปิดกลุ่มจึงมีผลกับฐานผู้ใช้ที่มีอยู่ทั้งหมดของคุณทันที ไม่ใช่แค่กับคนที่ลงทะเบียนหลังจากนั้น

ผลลัพธ์ของผู้ใช้แต่ละคนจะคงเดิมเมื่อเวลาผ่านไป: เมื่อถูกกำหนดแล้ว ผู้ใช้จะอยู่ในหรือนอกกลุ่มควบคุมจนกว่าคุณจะสับเปลี่ยนกลุ่ม เปลี่ยนขนาด หรือ User ID ของผู้ใช้เปลี่ยนแปลง ดังนั้นหากคุณปิดใช้งานกลุ่มแล้วเปิดใช้งานอีกครั้งในภายหลังโดยไม่สับเปลี่ยน คุณจะได้กลุ่มเดิมกลับมาทุกประการ เนื่องจากสูตรเองไม่ได้เปลี่ยนแปลง

กลุ่มควบคุมส่งผลต่อการส่งข้อความอย่างไร

Anchor link to

การเป็นสมาชิกกลุ่มควบคุมจะบล็อกหรืออนุญาตข้อความตามประเภทข้อความที่คุณตั้งค่าสำหรับการส่งแต่ละครั้ง

  • ข้อความทางการตลาด: ถูกบล็อกสำหรับผู้ใช้ในกลุ่มควบคุมบน Push, Email, In-App, SMS และ WhatsApp

  • ข้อความธุรกรรม: ยังคงถูกส่งบนช่องทางเหล่านั้น เลือก Transactional message เมื่อสร้าง Customer Journey หรือส่งข้อความครั้งเดียว

เลือก Marketing message หรือ Transactional message สำหรับการส่งทุกครั้งบนช่องทางเหล่านั้น ดูที่ที่จะตั้งค่าประเภทข้อความ

เรียนรู้เพิ่มเติมเกี่ยวกับข้อความทางการตลาดและข้อความธุรกรรม

สร้างกลุ่มควบคุม

Anchor link to

สร้างกลุ่มควบคุมเพื่อเริ่มกันผู้ใช้ส่วนหนึ่งของคุณออกจากข้อความทางการตลาด Control Panel จะสร้างหนึ่งกลุ่มต่อแอปพลิเคชัน New group จะหยุดปรากฏเมื่อคุณมีกลุ่มแล้ว

  1. ไปที่ Settings > Control groups
  2. คลิก New group

Control Groups list with no groups yet and an arrow pointing to the New group button

  1. ตั้งค่า Control group size: สัดส่วนของผู้ใช้ที่ถูกกันออกจากข้อความทางการตลาด ตั้งแต่ 1% ถึง 20%

New control group dialog with a control group size field

  1. คลิก Create กลุ่มจะเริ่มยกเว้นสมาชิกออกจากข้อความทางการตลาดทันที

จัดการกลุ่มควบคุม

Anchor link to

เปิด Settings > Control groups และคลิกที่แถวของกลุ่มเพื่อไปยังหน้าของกลุ่มนั้น ซึ่งส่วนต่างๆ ด้านล่างจะนำไปใช้

แก้ไขขนาดกลุ่มควบคุมและประเทศ

Anchor link to

คุณสามารถปรับขนาดของกลุ่มควบคุมและประเทศที่กลุ่มนั้นกันไว้ได้ตลอดเวลาจากหน้าของกลุ่ม

  1. คลิก Control group settings ที่มุมบนขวา ปุ่มนี้ยังแสดงเปอร์เซ็นต์ปัจจุบันของกลุ่มด้วย เช่น Control group settings: 10%
  2. เลือกเปอร์เซ็นต์ใหม่:
  • 3% (Maximum reach): กลุ่มยกเว้นที่เล็กที่สุดสำหรับผู้ชมที่ละเอียดอ่อนหรือมีมูลค่าสูง
  • 5% (Recommended for most apps): ส่วนผสมที่เหมาะสมที่สุดระหว่างความเชื่อมั่นในการวัดผลและการเข้าถึงผู้ใช้
  • 10% (Higher confidence): กลุ่มควบคุมที่ใหญ่ขึ้นเพื่อการตรวจสอบ ROI ที่ชัดเจนและน่าเชื่อถือยิ่งขึ้น
  • Custom (1%–20%): ตั้งค่าขนาดกลุ่มควบคุมแบบกำหนดเองเพื่อการวัดผลที่ยืดหยุ่น
  1. ใน Countries เลือกหนึ่งประเทศหรือมากกว่าเพื่อจำกัดกลุ่มควบคุม หรือปล่อยว่างไว้เพื่อกันผู้ใช้จากผู้ชมทั้งหมดของคุณ
  2. คลิก Apply เพื่อยืนยันการเปลี่ยนแปลง

Control group settings dialog with the percentage options and a Countries field showing Azerbaijan and Kazakhstan selected

กำหนดขอบเขตกลุ่มควบคุมตามประเทศ

Anchor link to

การกำหนดขอบเขตตามประเทศเป็นการตรวจสอบครั้งที่สองต่ออุปกรณ์ นอกเหนือจากการเป็นสมาชิกกลุ่มควบคุม ตั้งค่าได้ในกล่องโต้ตอบ Control group settings เดียวกันกับที่อธิบายไว้ในแก้ไขขนาดกลุ่มควบคุมและประเทศ

  • Countries ว่าง: ผู้ใช้ทุกคนที่สูตรเปอร์เซ็นต์เลือกจะถูกกันไว้ โดยไม่คำนึงถึงตำแหน่ง
  • Countries ไม่ว่าง: เฉพาะอุปกรณ์ที่แท็ก Country ของระบบตรงกับหนึ่งในประเทศที่เลือกเท่านั้นที่จะถูกกันไว้ อุปกรณ์ที่อยู่นอกประเทศที่เลือกจะยังคงได้รับข้อความทางการตลาด แม้ว่าผู้ใช้ของอุปกรณ์นั้นจะเป็นคนที่สูตรเปอร์เซ็นต์เลือกก็ตาม

คำนวณขนาดกลุ่มใหม่

Anchor link to

Control group size จะแสดงตัวเลขที่บันทึกไว้ซึ่ง Pushwoosh จะอัปเดตประมาณวันละครั้ง ทันทีหลังจากที่คุณเปลี่ยนขนาดกลุ่ม หรือเมื่อมีผู้ใช้ใหม่จำนวนมากเข้าร่วมแอปของคุณ ตัวเลขนี้อาจไม่อัปเดต

หากต้องการอัปเดตทันที ให้คลิก Recalculate ถัดจากขนาดกลุ่ม

สับเปลี่ยนกลุ่มควบคุม

Anchor link to

Reshuffle control group จะเลือกชุดผู้ใช้แบบสุ่มใหม่ โดยยังคงเปอร์เซ็นต์เท่าเดิม ทุกคนที่อยู่ในกลุ่มปัจจุบันจะออกจากกลุ่ม และชุดผู้ใช้ที่แตกต่างกันจะเข้ามาแทนที่ ใช้เมื่อคนกลุ่มเดิมถูกละเว้นจากข้อความทางการตลาดของคุณเป็นเวลานาน

  1. คลิก เมนูสามจุด ที่มุมบนขวา
  2. เลือก Reshuffle control group

Three-dot menu with Reshuffle control group option on a control group's page

  1. ยืนยันในกล่องโต้ตอบที่ปรากฏขึ้น

ส่งออกผู้ใช้กลุ่มควบคุม

Anchor link to

Pushwoosh ไม่ได้ติดแท็กผู้ใช้ในกลุ่มควบคุม ส่งออกจากหน้านี้เพื่อรับรายการแบบครั้งเดียว หรือเรียกใช้ CheckControlGroupMembership เพื่อตรวจสอบชุด User IDs ผ่านโปรแกรม

  1. คลิก เมนูสามจุด ที่มุมบนขวา
  2. เลือก Export users
  3. เมื่อการส่งออกเสร็จสิ้น คลิก Download CSV เพื่อบันทึกไฟล์

Exporting complete notification with Download CSV button on a control group's page

ปิดใช้งานกลุ่มควบคุม

Anchor link to
  1. คลิก เมนูสามจุด ที่มุมบนขวา
  2. เลือก Disable control group

Three-dot menu with Disable control group option on a control group's page

การปิดใช้งานจะหยุดกลุ่มนั้นจากการกันผู้ใช้ใดๆ ทันที และพวกเขาจะเริ่มได้รับข้อความทางการตลาดอีกครั้ง หากคุณเปิดใช้งานอีกครั้งในภายหลังโดยไม่สับเปลี่ยน Pushwoosh จะสร้างกลุ่มเดิมขึ้นมาใหม่ทุกประการ เนื่องจากสมาชิกภาพคำนวณจากสูตรเดียวกัน หากต้องการได้กลุ่มที่แตกต่างออกไปหลังจากเปิดใช้งานใหม่ ให้สับเปลี่ยนกลุ่ม

ลบกลุ่มควบคุม

Anchor link to

การลบกลุ่มควบคุมจะลบกลุ่มและการกำหนดค่าของกลุ่มออกอย่างถาวร

  1. คลิก เมนูสามจุด ที่มุมบนขวา
  2. เลือก Delete group
  3. ยืนยันในกล่องโต้ตอบที่ปรากฏขึ้น การกระทำนี้ไม่สามารถยกเลิกได้

วิเคราะห์ผลกระทบของกลุ่มควบคุม

Anchor link to

หน้าของแต่ละกลุ่มควบคุมจะแสดงให้เห็นว่าการส่งข้อความของคุณมีประสิทธิภาพเป็นอย่างไรเมื่อเทียบกับกลุ่มนั้น หน้านี้มีสองส่วน: ตารางเปรียบเทียบเหตุการณ์ที่ด้านบนและ Impact report ด้านล่าง ทั้งสองส่วนเปรียบเทียบผู้ใช้สองกลุ่มในเหตุการณ์ใดๆ ที่คุณเลือก:

  • Treatment group: ผู้ใช้ทั้งหมดที่ไม่ได้อยู่ในกลุ่มควบคุม พวกเขาจะยังคงได้รับข้อความทางการตลาดของคุณ (Push, Email, In-App, SMS, WhatsApp) ตามปกติ
  • Control group: กลุ่มที่กันไว้ที่คุณกำหนดค่าไว้ข้างต้น ผู้ใช้เหล่านี้จะถูกยกเว้นจากข้อความทางการตลาด ดังนั้นความแตกต่างใดๆ ในพฤติกรรมของพวกเขาจึงไม่ได้รับอิทธิพลจากแคมเปญของคุณ

เปรียบเทียบเหตุการณ์

Anchor link to
  1. เลือกช่วงเวลา: Last 3 days, Last 7 days, หรือ Last 30 days
  2. ตรวจสอบตารางเปรียบเทียบเหตุการณ์ ตารางจะแสดงเหตุการณ์โดยอัตโนมัติก็ต่อเมื่อคุณได้ตั้งค่า Conversion Goals ใน Customer Journey เท่านั้น มิฉะนั้นตารางจะว่างเปล่า
  3. คลิก Add events to compare เพื่อเพิ่มเหตุการณ์ใดๆ ที่คุณต้องการวัดผล คุณสามารถเพิ่มได้สูงสุด 10 เหตุการณ์

Control group page with a table comparing events between treatment and control

ตารางจะแสดงเมตริกเหล่านี้สำหรับแต่ละเหตุการณ์:

  • Conv. Treatment: อัตราคอนเวอร์ชันในกลุ่ม treatment นี่คือสัดส่วนของผู้ใช้ที่ไม่ซ้ำกันที่ได้รับข้อความทางการตลาดของคุณ (Push, Email, In-App, SMS, WhatsApp) และทำให้เกิดเหตุการณ์อย่างน้อยหนึ่งครั้ง
  • Conv. Control: อัตราคอนเวอร์ชันในกลุ่มควบคุม นี่คือสัดส่วนของผู้ใช้ที่ไม่ซ้ำกันที่ถูกกันออกจากข้อความทางการตลาดและทำให้เกิดเหตุการณ์อย่างน้อยหนึ่งครั้งโดยไม่มีอิทธิพลจากการส่งข้อความ
  • Uplift: ความแตกต่างเป็นเปอร์เซ็นต์ระหว่างอัตราคอนเวอร์ชันของกลุ่ม treatment และ control เทียบกับอัตราของกลุ่ม control ค่าบวกหมายความว่ากลุ่ม treatment มีคอนเวอร์ชันดีกว่า คำนวณเป็น (conv. treatment − conv. control) / conv. control × 100%
  • Significance: ความแตกต่างนั้นน่าเชื่อถือทางสถิติหรือไม่:
    • Significant: uplift ไม่น่าจะเกิดจากความบังเอิญ
    • Not significant: ความแตกต่างยังไม่น่าเชื่อถือทางสถิติ
    • Not enough data: กลุ่มใดกลุ่มหนึ่งมีคอนเวอร์ชันน้อยกว่า 10 ครั้ง หรือมีผู้ที่ไม่เกิดคอนเวอร์ชันน้อยกว่า 10 ครั้งสำหรับเหตุการณ์นี้ ดังนั้นจึงไม่สามารถคำนวณนัยสำคัญได้

ดูรายงานผลกระทบ (Impact report)

Anchor link to

ใช้เมนู View event เพื่อเลือกเหตุการณ์จากตาราง Impact report ด้านล่างจะแสดงรายละเอียดที่ลึกซึ้งยิ่งขึ้นสำหรับเหตุการณ์นั้น

Impact report showing uplift, conversions driven by messaging, and a group breakdown table

  • Uplift (change from control): อัตราคอนเวอร์ชันของกลุ่ม treatment แตกต่างจากอัตราคอนเวอร์ชันของกลุ่ม control มากน้อยเพียงใด นี่คือค่าเดียวกับที่แสดงในตารางเหตุการณ์
  • Conversions driven by messaging: จำนวนเหตุการณ์เพิ่มเติมโดยประมาณที่เกิดจากข้อความของคุณ นอกเหนือจากจำนวนที่คาดว่าจะเกิดขึ้นหากไม่มีการส่งข้อความ คำนวณเป็น (events per user in treatment − events per user in control) × treatment group size เปอร์เซ็นต์จะแสดงเหตุการณ์เพิ่มเติมเหล่านี้เป็นสัดส่วนของเหตุการณ์ทั้งหมดในกลุ่ม treatment
  • Significance: บ่งชี้ว่าความแตกต่างที่วัดได้นั้นน่าเชื่อถือทางสถิติหรือไม่ รายงานจะแสดง Significant, Not significant, หรือ Not enough data โดยอิงจาก:
    • Confidence: Pushwoosh มั่นใจแค่ไหนว่า uplift สะท้อนถึงความแตกต่างที่แท้จริงระหว่างกลุ่ม treatment และ control แทนที่จะเป็นความบังเอิญ แสดงเป็นเปอร์เซ็นต์ ยิ่งความเชื่อมั่นสูง หลักฐานก็ยิ่งแข็งแกร่ง
    • P-value: แสดงความน่าจะเป็นที่จะสังเกตเห็นความแตกต่างนี้โดยบังเอิญหากการส่งข้อความไม่มีผลจริง P-value ที่ต่ำกว่าจะให้หลักฐานที่แข็งแกร่งกว่าว่าความแตกต่างนั้นไม่ใช่เรื่องสุ่ม
  • Z-score: แสดงให้เห็นว่าประสิทธิภาพของสองกลุ่มของคุณห่างกันแค่ไหน คะแนนที่ใกล้เคียงกับ 0 หมายความว่าความแตกต่างอาจเป็นเรื่องสุ่ม ยิ่งห่างจาก 0 มากเท่าไหร่ คุณก็ยิ่งมั่นใจได้ว่ากลุ่มหนึ่งดีกว่าอีกกลุ่มหนึ่งอย่างแท้จริง
  • Group breakdown: เปรียบเทียบกลุ่ม Treatment และ Control ตาม Estimated users, Total number of events, Events per user, และ Conv. rate (unique)

คำถามที่พบบ่อย

Anchor link to

แอปพลิเคชันสามารถมีกลุ่มควบคุมมากกว่าหนึ่งกลุ่มได้หรือไม่

Anchor link to

ใน Control Panel ไม่ได้ครับ จะสร้างกลุ่มควบคุมได้เพียงกลุ่มเดียวต่อแอปพลิเคชัน ซึ่งจะถูกนำไปใช้โดยอัตโนมัติกับการส่งข้อความทางการตลาดทุกครั้ง นี่เป็นข้อจำกัดของอินเทอร์เฟซ ไม่ใช่ของแพลตฟอร์ม Control Panel ไม่มีวิธีที่จะชี้ข้อความเฉพาะไปยังกลุ่มอื่น

ฉันสามารถลบกลุ่มควบคุมได้หรือไม่

Anchor link to

ได้ จากเมนูสามจุดในหน้าของกลุ่ม การกระทำนี้ไม่สามารถยกเลิกได้ และจะทำให้แอปพลิเคชันไม่มีกลุ่มสำรอง: ข้อความทางการตลาดจะถูกส่งไปยังทุกคนจนกว่าคุณจะสร้างกลุ่มควบคุมใหม่ หากต้องการหยุดกลุ่มชั่วคราวโดยไม่ลบ ให้ปิดใช้งานแทนการลบ

ผู้ใช้คนไหนอยู่ในกลุ่มควบคุม

Anchor link to

Pushwoosh ไม่ได้เก็บรายชื่อสมาชิกกลุ่มควบคุมไว้ แต่จะใช้สูตร ซึ่งเป็นการคำนวณที่ให้คำตอบเดียวกันเสมอสำหรับอินพุตเดียวกัน โดยอิงจากแอปของคุณ ID ของผู้ใช้ และการตั้งค่าปัจจุบันของกลุ่ม สิ่งนี้จะนำไปใช้กับฐานผู้ใช้ที่มีอยู่ทั้งหมดของคุณทันทีที่คุณเปิดใช้งานกลุ่ม ไม่ใช่เฉพาะผู้ที่ลงทะเบียนใหม่ และผลลัพธ์จะยังคงเหมือนเดิมสำหรับผู้ใช้แต่ละรายทุกครั้ง จนกว่าคุณจะสับเปลี่ยนกลุ่มหรือเปลี่ยนขนาด

ผู้ใช้ในกลุ่มควบคุมได้รับข้อความธุรกรรมหรือไม่

Anchor link to

ใช่ ข้อความธุรกรรม (เช่น การรีเซ็ตรหัสผ่าน การยืนยันคำสั่งซื้อ) จะถูกส่งไปยังผู้ใช้ทุกคน รวมถึงกลุ่มควบคุมด้วย เฉพาะข้อความทางการตลาดเท่านั้นที่จะถูกบล็อกสำหรับผู้ใช้ในกลุ่มควบคุม

ฉันจะตั้งค่าประเภทข้อความเป็นแบบการตลาดหรือธุรกรรมได้ที่ไหน

Anchor link to

คุณสามารถเลือกได้ทุกที่ที่คุณส่งข้อความ สำหรับแต่ละช่องทาง โปรดดูที่ จะตั้งค่าประเภทข้อความได้ที่ไหน

จะเกิดอะไรขึ้นกับแคมเปญที่สร้างขึ้นก่อนที่ฉันจะเปิดใช้งานกลุ่มควบคุม

Anchor link to

แคมเปญที่สร้างขึ้นก่อนที่คุณจะเปิดใช้งานกลุ่มควบคุมจะทำงานเหมือนกับแคมเปญใหม่ทุกประการ: Pushwoosh จะตรวจสอบประเภทข้อความของแคมเปญ ณ เวลาที่ส่ง ไม่ใช่เวลาที่สร้าง

  • Marketing message (หรือไม่มีประเภทข้อความเลย ซึ่งอาจเกิดขึ้นกับแคมเปญที่สร้างผ่าน API): กลุ่มควบคุมจะยกเว้นผู้ใช้เหล่านั้นทันที
  • Transactional message: ผู้ใช้ในกลุ่มควบคุมจะยังคงได้รับข้อความเหมือนเดิม

แก้ไขแคมเปญและตั้งค่าประเภทข้อความเป็น Transactional message หากคุณต้องการให้เข้าถึงทุกคน รวมถึงกลุ่มควบคุมด้วย

ฉันสามารถเปลี่ยนขนาดกลุ่มควบคุมหลังจากเปิดใช้งานได้หรือไม่

Anchor link to

ได้ เปิดหน้าของกลุ่มจาก Settings > Control groups คลิก Control group settings เลือกเปอร์เซ็นต์ใหม่ (1% ถึง 20%) แล้วคลิก Apply Pushwoosh จะคำนวณสมาชิกใหม่สำหรับฐานผู้ใช้ทั้งหมดของคุณตามเปอร์เซ็นต์ใหม่: การขยายกลุ่มจะเพิ่มผู้ใช้โดยไม่ลบใครที่อยู่ในกลุ่มอยู่แล้ว และการลดขนาดจะปล่อยสมาชิกที่มีอยู่ออกไปบางส่วน ซึ่งอาจส่งผลต่อการเปรียบเทียบกับแคมเปญก่อนหน้า ดังนั้นควรเปลี่ยนขนาดเมื่อจำเป็นเท่านั้น

ฉันสามารถกำหนดขอบเขตกลุ่มควบคุมเฉพาะบางประเทศได้หรือไม่

Anchor link to

ได้ เปิดหน้าของกลุ่มจาก Settings > Control groups คลิก Control group settings และตั้งค่า Countries ปล่อยว่างไว้เพื่อกันผู้ใช้จากผู้ชมทั้งหมดของคุณ หรือเลือกหนึ่งประเทศหรือมากกว่าเพื่อกันเฉพาะอุปกรณ์ในประเทศนั้นๆ การกำหนดขอบเขตตามประเทศเป็นการตรวจสอบต่ออุปกรณ์เพิ่มเติมจากสูตรเปอร์เซ็นต์: มันไม่ได้เปลี่ยนว่าสูตรเลือกใคร แต่จะเปลี่ยนเฉพาะอุปกรณ์ของพวกเขาที่จะถูกยกเว้นจากการตลาด การเปลี่ยน Countries จะเป็นการรีสตาร์ทการวัดผล uplift เนื่องจากผู้ชมที่เปรียบเทียบมีการเปลี่ยนแปลง

จะเกิดอะไรขึ้นกับอุปกรณ์ที่ไม่มีข้อมูลประเทศ

Anchor link to

อุปกรณ์นั้นจะไม่ถูกกันไว้ แม้ว่าจะตั้งค่า Countries และผู้ใช้ของอุปกรณ์นั้นถูกเลือกไว้ก็ตาม Pushwoosh จะตรวจสอบแท็ก Country ของระบบของอุปกรณ์เทียบกับขอบเขต และอุปกรณ์ที่ไม่มีแท็กนั้นจะไม่มีอะไรให้ตรวจสอบ ดังนั้นมันจะยังคงได้รับข้อความทางการตลาดต่อไป

จะเกิดอะไรขึ้นถ้าฉันปิดใช้งานกลุ่มควบคุม

Anchor link to

Pushwoosh จะหยุดกันผู้ใช้ใดๆ และทุกคนจะเริ่มได้รับข้อความทางการตลาดอีกครั้ง หากคุณเปิดใช้งานกลุ่มควบคุมอีกครั้งในภายหลังโดยไม่สับเปลี่ยน คุณจะได้กลุ่มเดิมกลับมาทุกประการ เพราะการเป็นสมาชิกคำนวณจากสูตรเดียวกัน หากต้องการได้กลุ่มที่แตกต่างออกไปหลังจากเปิดใช้งานใหม่ ให้สับเปลี่ยนกลุ่ม

Reshuffle ทำอะไร

Anchor link to

Reshuffle control group จะสุ่มตัวอย่างใหม่ทั้งหมดในเปอร์เซ็นต์เท่าเดิม โดยแทนที่กลุ่มควบคุมปัจจุบันด้วยชุดผู้ใช้ที่แตกต่างกัน สามารถใช้ได้จาก เมนูสามจุด ในหน้าของกลุ่ม ใช้เมื่อผู้ใช้กลุ่มเดิมถูกยกเว้นจากการตลาดเป็นเวลานานและคุณต้องการการครอบคลุมกลุ่มที่กันไว้ใหม่ การสับเปลี่ยนยังเป็นการรีสตาร์ทหน้าต่างการวัดผลสำหรับการวิเคราะห์กลุ่มควบคุมด้วย

ฉันจะดูได้อย่างไรว่าผู้ใช้คนไหนอยู่ในกลุ่มควบคุม

Anchor link to

Pushwoosh ไม่ได้ติดแท็กผู้ใช้ในกลุ่มควบคุม เปิดหน้าของกลุ่มจาก Settings > Control groups คลิก เมนูสามจุด แล้วเลือก Export users เพื่อดาวน์โหลดไฟล์ CSV ของสมาชิกปัจจุบัน หากต้องการตรวจสอบการเป็นสมาชิกผ่านโปรแกรมแทน ให้เรียกใช้ CheckControlGroupMembership พร้อมกับชุดของ User IDs

ทำไมผู้ใช้ในกลุ่มควบคุมอาจยังคงได้รับข้อความทางการตลาด

Anchor link to

Pushwoosh คำนวณการเป็นสมาชิกกลุ่มควบคุมตาม User ID หากบุคคลคนเดียวกันมีวิธีการติดต่อหลายวิธี (เช่น อีเมล, อุปกรณ์พุช) ที่ไม่ได้เชื่อมโยงภายใต้ User ID เดียวกัน Pushwoosh จะถือว่าเป็นผู้ใช้ที่แตกต่างกันและคำนวณการเป็นสมาชิกสำหรับแต่ละรายแยกกัน: รายหนึ่งอาจอยู่ในกลุ่มควบคุมในขณะที่อีกรายไม่อยู่ วิธีการติดต่อที่ไม่มี User ID เลยจะไม่ถูกกันไว้ เนื่องจาก Pushwoosh ต้องการ User ID เพื่อคำนวณการเป็นสมาชิก เพื่อหลีกเลี่ยงปัญหานี้ ให้ลงทะเบียนวิธีการติดต่อทั้งหมดด้วย User ID เดียวกัน

ฉันควรเลือกเปอร์เซ็นต์กลุ่มควบคุมเท่าไหร่

Anchor link to

เปอร์เซ็นต์ที่เหมาะสมขึ้นอยู่กับเป้าหมายของคุณ ขนาดแอป และวิธีที่คุณวางแผนจะใช้ผลลัพธ์ เปอร์เซ็นต์ที่น้อยกว่า (เช่น 3%) จะทำให้มีผู้ใช้ในกลุ่มเป้าหมายมากขึ้นและอาจเหมาะกับทีมที่ให้ความสำคัญกับการเข้าถึง เปอร์เซ็นต์ที่ใหญ่กว่า (เช่น 10%) สามารถให้ความเชื่อมั่นทางสถิติที่แข็งแกร่งขึ้นเมื่อเปรียบเทียบกลุ่ม คุณสามารถตั้งค่า Custom ได้ระหว่าง 1% ถึง 20% เพื่อให้ตรงกับความต้องการของคุณ

ทำไมกลุ่มควบคุมของฉันถึงไม่ตรงกับเปอร์เซ็นต์ที่ฉันตั้งไว้

Anchor link to

ขนาดกลุ่มที่แสดงในหน้าคือจำนวนผู้ใช้จริงที่สูตรแฮชกำหนดให้กับกลุ่ม ไม่ใช่เปอร์เซ็นต์ที่คูณด้วยจำนวนผู้ใช้ของคุณ สำหรับแอปขนาดเล็ก จำนวนนี้อาจแตกต่างจากเปอร์เซ็นต์อย่างเห็นได้ชัด เนื่องจากสูตรจะกระจายผู้ใช้เป็นรายบุคคลแทนที่จะสุ่มตัวอย่างในสัดส่วนที่แน่นอน จำนวนนี้จะถูกแคชและรีเฟรชประมาณวันละครั้ง คุณสามารถสั่งให้คำนวณใหม่ทันทีจากหน้าเว็บ ซึ่งจะแสดงจำนวนก่อนหน้าพร้อมตัวบ่งชี้การโหลดในขณะที่ทำงาน

Not enough data ในตารางเหตุการณ์หมายความว่าอย่างไร

Anchor link to

Not enough data หมายความว่ากลุ่ม treatment หรือ control มีคอนเวอร์ชันน้อยกว่า 10 ครั้ง หรือมีผู้ที่ไม่เกิดคอนเวอร์ชันน้อยกว่า 10 ครั้งสำหรับเหตุการณ์นั้นในช่วงเวลาที่เลือก Pushwoosh ไม่สามารถระบุได้ว่าความแตกต่างระหว่างกลุ่มนั้นมีนัยสำคัญทางสถิติหรือไม่จนกว่าจะมีข้อมูลเพิ่มเติม

Uplift คำนวณอย่างไร

Anchor link to

Uplift แสดงความแตกต่างเป็นเปอร์เซ็นต์ระหว่างอัตราคอนเวอร์ชันของกลุ่ม treatment และ control เทียบกับอัตราของกลุ่ม control ค่าบวกหมายความว่ากลุ่ม treatment มีคอนเวอร์ชันดีกว่า Pushwoosh คำนวณเป็น (conv. treatment − conv. control) / conv. control × 100%

Conversions driven by messaging หมายความว่าอย่างไร

Anchor link to

Conversions driven by messaging คือจำนวนเหตุการณ์เพิ่มเติมโดยประมาณที่เกิดจากข้อความของคุณ นอกเหนือจากจำนวนที่คาดว่าจะเกิดขึ้นหากไม่มีการส่งข้อความ Pushwoosh คำนวณเป็น (events per user in treatment − events per user in control) × treatment group size เปอร์เซ็นต์จะแสดงเหตุการณ์เพิ่มเติมเหล่านี้เป็นสัดส่วนของเหตุการณ์ทั้งหมดในกลุ่ม treatment

ฉันสามารถเปรียบเทียบเหตุการณ์ใดได้บ้างและจำนวนเท่าไหร่

Anchor link to

คุณสามารถเปรียบเทียบเหตุการณ์ที่กำหนดค่าเป็น Conversion Goals ใน Customer Journey คุณสามารถเพิ่มได้สูงสุด 10 เหตุการณ์ในตารางเปรียบเทียบ เหตุการณ์ที่เกี่ยวข้องกับการมีส่วนร่วมกับข้อความ (เช่น การเปิด การคลิก การส่ง การตีกลับ) จะถูกยกเว้นแม้ว่าจะตั้งเป็นเป้าหมายก็ตาม เนื่องจากผู้ใช้ในกลุ่มควบคุมจะไม่ได้รับข้อความทางการตลาดเพื่อตอบสนอง