고객 여정에서 A/B/n 테스트를 실행하는 방법

A/B/n 테스트가 유용한 이유

어떤 메시지, 제안, 시점 또는 채널이 사용자로부터 최상의 반응을 얻을지 항상 명확하지는 않습니다. A/B/n 테스트를 사용하면 여러 변형을 한 번에 비교하여 다음을 수행할 수 있습니다.

• 어떤 조합이 가장 많은 전환을 유도하는지 찾기

• 별도의 캠페인을 실행하는 대신 하나의 여정에서 아이디어를 신속하게 테스트하기

• 현재 커뮤니케이션과 비교하여 벤치마킹할 대조군 유지하기

예를 들어, 온라인 상점은 사용자가 즉시 10% 할인 푸시를 받았을 때, 24시간 후 무료 배송 이메일을 받았을 때, 또는 인센티브 없는 SMS 알림을 받았을 때 중 어느 경우에 더 많은 사용자가 결제를 완료하는지 테스트할 수 있습니다.

Pushwoosh의 A/B/n 분할로 테스트할 수 있는 것

Customer Journeys의 A/B/n 분할 요소를 사용하면 캠페인의 여러 측면을 테스트할 수 있습니다. 일반적인 테스트 사례는 다음과 같습니다.

• 타이밍: 즉시 메시지와 지연 메시지 비교 (예: 장바구니 알림을 즉시 보낼 때와 24시간 후에 보낼 때).

• 개인화: 일반 콘텐츠와 개인화된 콘텐츠 테스트 (예: “새로운 상품 쇼핑하기” 대 “안나님, 저장하신 상품이 다시 입고되었습니다”).

• 채널 성과: 어떤 채널이 가장 효과적인지 확인.

• 메시지 콘텐츠: 문구, 시각 자료, 클릭 유도 버튼, 제목, 레이아웃 등 다양한 형식 실험.

아래에서는 A/B/n 테스트가 고객 여정을 최적화하는 데 도움이 될 수 있는 몇 가지 일반적인 사례를 다룹니다.

버려진 장바구니에 대한 할인 유형 테스트

목표

장바구니를 버린 사용자들 사이에서 어떤 할인 유형이 가장 높은 전환율을 유도하는지 알아내기:

• 10% 할인
• $10 할인
• 무료 배송

1단계. 진입 요소 설정

트리거 기반 진입 요소로 여정을 시작하고 이벤트 트리거 Cart_Abandoned를 선택합니다.

이렇게 하면 장바구니에 상품을 추가했지만 결제를 완료하지 않은 사용자를 대상으로 여정이 진행됩니다. 선택적으로, 최소 금액(예: $50 이상)의 장바구니를 버린 사용자를 포함하도록 잠재고객을 필터링할 수 있습니다.

이벤트 구성 방법에 대한 자세한 내용은 이벤트 문서를 참조하세요.

2단계. 전환 목표 정의

테스트 결과를 측정하기 위해 전환 목표를 설정합니다. 이를 위해 캔버스 상단의 전환 목표를 클릭하고 목표 이벤트를 CheckoutSuccess로 설정합니다. 이렇게 하면 어떤 할인 제안이 더 많은 결제 완료로 이어지는지 확인할 수 있습니다.

3단계. A/B/n 분할 요소 구성

진입 요소 뒤에 A/B/n 분할 요소를 배치하여 사용자를 세 그룹으로 나눕니다. 브랜치 간에 사용자를 균등하게 분배합니다.

목표에 따라 자동으로 승자 선택을 선택하고 승자 선택 목표로 CheckoutSuccess를 선택합니다. 이는 Pushwoosh가 통계적으로 유의미한 승자를 감지하면 약한 브랜치가 비활성화되고 모든 신규 사용자가 승자 브랜치로 라우팅됨을 의미합니다.

4단계. 나머지 여정 구성

각 브랜치에서 메시지를 설정합니다. 각 브랜치에 대해 푸시 요소를 추가하고 구성합니다.

예를 들어:

• 브랜치 A (대조군): 10% 할인을 제공하는 푸시 발송. 예시 콘텐츠: “오늘 주문을 완료하고 10% 할인을 받으세요 – 기간 한정!”

• 브랜치 B: $10 할인을 제공하는 푸시 발송. 예시 콘텐츠: “주문에 $10 할인을 드립니다 – 지금 결제를 완료하세요.”

• 브랜치 C: 무료 배송을 제공하는 푸시 발송. 예시 콘텐츠: “장바구니를 저장해 두었습니다! 오늘 주문하고 무료 배송 혜택을 받으세요.”

마지막으로 종료 요소를 추가하여 여정을 완료합니다.

5단계. 여정 시작

모든 브랜치가 구성되면 여정을 시작합니다. 장바구니를 버린 사용자는 무작위로 세 그룹으로 나뉘어 각각 할당된 할인 제안을 받게 됩니다. 통계적 유의성에 도달하면 Pushwoosh는 장바구니를 버린 모든 신규 사용자를 자동으로 승자 브랜치로 안내합니다.

결과를 분석하려면 A/B/n 분할을 두 번 클릭하여 상세 통계를 엽니다. 더 알아보기

피트니스 앱 재참여 캠페인을 위한 채널 효율성 테스트

목표

비활성 사용자가 앱으로 돌아오도록 동기를 부여하는 데 어떤 커뮤니케이션 채널(푸시, 이메일, SMS)이 가장 효과적인지 결정합니다.

중요

이 테스트를 올바르게 실행하려면 각 사용자가 푸시 알림, 이메일, SMS를 통해 도달 가능하고 모든 해당 식별자(기기 토큰, 이메일 주소, 전화번호)가 단일 사용자 지정 User ID 아래에 연결되어 있는지 확인해야 합니다. 이를 통해 Pushwoosh는 채널 간에 동일한 사용자를 정확하게 식별하고, 메시지를 올바르게 전달하며, 테스트 브랜치 간에 사용자를 정확하게 분배할 수 있습니다.

이 설정에는 개발자의 도움이 필요합니다. 이 가이드를 개발팀과 공유하세요: 사용자 지정 User ID 설정 및 여러 기기에 연결하기.

1단계. 진입 요소 추가 및 잠재고객 선택

잠재고객 기반 진입으로 여정을 시작하고 비활성 사용자 세그먼트(14일 이상 운동 기록 없음)를 선택하거나 생성합니다.

세그먼트 생성에 대해 자세히 알아보세요.

2단계. 전환 목표 정의

WorkoutLogged 이벤트를 전환 목표로 설정하여 어떤 채널이 재참여를 유도하는지 측정합니다.

이벤트 구성 방법에 대한 자세한 내용은 이벤트 문서를 참조하세요.

3단계. A/B/n 분할 요소 설정

진입 요소 뒤에 A/B/n 분할 요소를 추가합니다. 균등 분배로 3개의 브랜치를 선택하고 선택한 전환 목표와 함께 목표에 따라 자동으로 승자 선택을 사용합니다.

4단계. 나머지 여정 구성

다음 브랜치에 대한 여정을 구성합니다. 각 브랜치에서 적절한 메시지 요소(푸시, 이메일 또는 SMS)를 추가하고 구성합니다:

• 브랜치 A (대조군): 푸시 요소 예시 콘텐츠: “움직일 시간입니다 💪 탭하여 지금 운동을 시작하세요!”

• 브랜치 B: 이메일 요소 예시 콘텐츠: “당신의 피트니스 여정이 기다리고 있습니다. 오늘 다음 세션을 기록하세요!”

• 브랜치 C: SMS 요소 예시 콘텐츠: “지금 멈추지 마세요! 오늘의 운동을 추적하고 연속 기록을 유지하세요!”

마지막으로 종료 요소를 추가하여 여정을 완료합니다.

5단계. 여정 시작

여정을 시작합니다. 사용자는 브랜치 간에 분할되어 채널 중 하나를 통해 연락을 받게 됩니다. Pushwoosh는 자동으로 승자를 감지하고 사용자를 승자 브랜치로 안내합니다.

결과를 분석하려면 A/B/n 분할을 두 번 클릭하여 상세 통계를 엽니다. 더 알아보기