컨트롤 그룹 FAQ

전체 앱이 아니라 하나의 journey에 대해서만 사용자를 홀드아웃할 수 있나요?

네. 앱의 모든 마케팅 발송에서 사용자를 홀드아웃하는 대신, Customer Journey Builder 내의 Holdout Split 요소를 사용하여 단일 journey의 한 지점에서 일부 사용자를 홀드아웃할 수 있습니다. 이 요소는 이 페이지와는 별도로 자체 목표 상승도를 보고합니다.

하나의 애플리케이션에 여러 개의 컨트롤 그룹을 가질 수 있나요?

네. 설정 > 컨트롤 그룹에서 컨트롤 그룹 추가를 클릭하여 그룹을 하나 더 추가할 수 있습니다(예: 시장별로 하나씩).

• 활성화된 모든 그룹은 각자의 국가 및 태그 범위 내에서 앱의 모든 마케팅 발송에 적용됩니다. 메시지마다 그룹을 선택하지 않습니다.
• 어느 그룹이든 사용자를 선택하면 해당 사용자는 홀드아웃됩니다.
• 그룹은 겹칠 수 있습니다. 두 그룹 모두에 해당하는 사용자는 두 그룹의 통계를 모두 왜곡하므로, Pushwoosh는 경고를 표시하고 목록에 N개 그룹과 겹침을 표시합니다.

여러 컨트롤 그룹이 함께 작동하는 방식을 참조하세요.

컨트롤 그룹을 삭제할 수 있나요?

네, 그룹 페이지의 점 3개 메뉴에서 삭제할 수 있습니다. 이 작업은 되돌릴 수 없습니다: 그룹은 사용자 홀드아웃을 중단하고 모든 통계가 손실됩니다. 앱의 다른 그룹은 계속 작동합니다. 활성화된 그룹이 하나도 남지 않으면 마케팅 메시지는 모든 사용자에게 전송됩니다. 기록을 유지하면서 그룹을 중지하려면 삭제 대화상자에서 대신 비활성화를 클릭하거나 점 3개 메뉴에서 비활성화하세요.

컨트롤 그룹의 이름을 변경할 수 있나요?

네. 그룹 페이지에서 점 3개 메뉴를 클릭하고 이름 변경을 선택하세요. Pushwoosh에 표시되는 이름만 바뀌며, 그룹의 사용자, 현재 주기 및 통계는 동일하게 유지됩니다.

어떤 사용자가 컨트롤 그룹에 속하나요?

Pushwoosh는 컨트롤 그룹 구성원의 저장된 목록을 유지하지 않습니다. 앱, 사용자 ID 및 그룹의 현재 설정을 기반으로 동일한 입력에 대해 항상 동일한 답변을 제공하는 계산인 공식을 사용합니다. 이는 그룹을 활성화하는 순간 신규 가입자뿐만 아니라 전체 기존 사용자 기반에 적용되며, 그룹을 재구성하거나 크기를 변경하거나, 사용자 ID가 변경되거나, 자동 갱신 주기가 끝나거나 실험이 종료일에 도달할 때까지 주어진 사용자에 대해 결과는 동일하게 유지됩니다.

컨트롤 그룹 사용자는 트랜잭션 메시지를 받나요?

네. 트랜잭션 메시지(예: 비밀번호 재설정, 주문 확인)는 컨트롤 그룹을 포함한 모든 사용자에게 전달됩니다. 컨트롤 그룹 사용자에게는 마케팅 메시지만 차단됩니다.

마케팅 또는 트랜잭션 메시지 유형은 어디서 설정하나요?

메시지를 보내는 곳 어디에서나 선택할 수 있습니다. 각 채널에 대해서는 메시지 유형 설정 위치를 참조하세요.

컨트롤 그룹을 활성화하기 전에 생성된 캠페인은 어떻게 되나요?

컨트롤 그룹을 활성화하기 전에 생성된 캠페인은 새 캠페인과 똑같이 작동합니다: Pushwoosh는 캠페인 생성 시점이 아닌 발송 시점에 캠페인의 메시지 유형을 확인합니다.

• 마케팅 메시지 (또는 API를 통해 생성된 캠페인의 경우 발생할 수 있는 메시지 유형 없음): 컨트롤 그룹은 즉시 해당 사용자를 제외합니다.
• 트랜잭션 메시지: 컨트롤 그룹 사용자는 이전과 같이 계속 수신합니다.

컨트롤 그룹을 포함한 모든 사람에게 도달하게 하려면 캠페인을 편집하고 메시지 유형을 트랜잭션 메시지로 설정하세요.

활성화 후 컨트롤 그룹 크기를 변경할 수 있나요?

네. 설정 > 컨트롤 그룹에서 그룹 페이지를 열고, 컨트롤 그룹 설정을 클릭하고, 새 백분율(1%~20%)을 선택한 다음 적용을 클릭하세요. Pushwoosh는 전체 사용자 기반에 대해 새 백분율에 따라 멤버십을 다시 계산합니다: 그룹을 늘리면 기존 구성원을 제거하지 않고 사용자를 추가하고, 그룹을 줄이면 일부 기존 구성원을 해제합니다. 이는 이전 캠페인과의 비교에 영향을 미칠 수 있으므로 필요할 때만 크기를 변경하세요.

어떤 컨트롤 그룹 모드를 사용할 수 있나요?

세 가지입니다. 영구 모드는 그룹을 끌 때까지 동일한 그룹을 유지합니다. 자동 갱신 모드는 각 주기(1, 2 또는 3개월)가 끝날 때 자동으로 새 그룹으로 교체하고 이전 그룹을 메시징으로 돌려보냅니다. 종료일이 있는 실험 모드는 설정한 날짜(최소 30일 이후)까지 그룹을 운영한 다음 모든 사람을 자동으로 메시징으로 돌려보냅니다. 모드는 그룹을 생성할 때 설정하거나, 나중에 그룹의 크기와 국가를 편집하는 데 사용하는 동일한 대화상자인 컨트롤 그룹 설정에서 설정합니다. 모드를 변경하면 크기 변경이나 범위 재지정과 마찬가지로 그룹의 현재 주기가 종료됩니다.

컨트롤 그룹의 이전 주기는 어떻게 확인하나요?

1. 그룹 페이지를 엽니다.
2. 오른쪽 상단의 기간 선택기를 클릭합니다. 레이블은 자동 갱신 그룹의 경우 현재 주기, 종료일이 있는 실험 그룹의 경우 현재 실험이며, 영구 그룹에는 레이블이 없습니다.
3. 이전에서 주기를 선택합니다. 종료된 주기는 주기 또는 실험으로 번호별로 나열됩니다.

크기 변경, 범위 재지정 또는 모드 변경 시 새 주기가 시작되므로 영구 그룹에도 이전 주기가 있을 수 있습니다.

컨트롤 그룹 결과가 처음부터 다시 시작된 이유는 무엇인가요?

측정 기간은 그룹의 구성원이나 잠재고객이 변경될 때마다 다시 시작됩니다:

• 그룹 크기를 조정하거나 국가 또는 태그를 변경하는 경우;
• 그룹을 재구성하는 경우;
• 모드를 변경하는 경우;
• 자동 갱신 주기가 끝나거나 실험이 종료일에 도달하는 경우.

그 시점 이전의 데이터는 더 이상 현재 그룹과 일치하지 않으므로 포함되지 않습니다. 종료된 주기는 그룹 페이지의 기간 선택기에서 이전 아래에 계속 표시됩니다.

종료일이 있는 실험이 끝나면 어떻게 되나요?

설정한 종료 날짜에 그룹의 모든 사람이 자동으로 마케팅 메시지 수신 상태로 돌아갑니다. 이후 해당 실험은 그룹 페이지의 기간 선택기에서 이전 아래에 자체 번호가 붙은 실험으로 표시되므로 결과를 계속 검토할 수 있습니다.

컨트롤 그룹의 범위를 특정 국가로 지정할 수 있나요?

네. 그룹을 생성할 때 국가를 설정하거나, 나중에 설정 > 컨트롤 그룹에서 그룹 페이지를 열고 컨트롤 그룹 설정을 클릭하여 설정하세요. 전체 잠재고객에 걸쳐 사용자를 홀드아웃하려면 비워두거나, 하나 이상의 국가를 선택하여 해당 국가의 장치만 홀드아웃하세요. 국가 범위는 백분율 공식 위에 있는 장치별 확인입니다: 공식이 선택하는 사용자는 변경되지 않으며, 해당 사용자의 장치 중 마케팅에서 제외되는 장치만 변경됩니다. 비교 대상 잠재고객이 변경되므로 국가를 변경하면 상승도 측정이 다시 시작됩니다.

국가 데이터가 없는 장치는 어떻게 되나요?

국가가 설정되어 있고 사용자가 선택된 경우에도 절대 홀드아웃되지 않습니다. Pushwoosh는 장치의 시스템 국가 태그를 범위와 비교하며, 해당 태그가 없는 장치는 확인할 대상이 없으므로 계속해서 마케팅 메시지를 수신합니다.

태그로 컨트롤 그룹의 범위를 지정할 수 있나요?

네. 그룹을 생성할 때 태그를 설정하거나, 나중에 설정 > 컨트롤 그룹에서 그룹 페이지를 열고 컨트롤 그룹 설정을 클릭하여 설정하세요. 국가를 제외한 문자열 또는 불리언 태그를 선택한 다음 값을 하나 이상 선택합니다. 국가 범위와 같이 작동합니다: 백분율 공식 위에 있는 장치별 확인이며, 둘 다 설정하면 국가와 함께 적용됩니다. 해당 태그에 값이 없거나 선택하지 않은 값을 가진 장치는 사용자가 선택된 경우에도 마케팅 메시지를 계속 수신합니다.

태그 범위는 장치 태그 및 사용자 태그와 어떻게 상호 작용하나요?

장치별로 설정한 태그는 해당 장치 하나만 설명하므로, 이 태그로 범위를 지정하면 장치를 하나씩 홀드아웃합니다. 사용자별로 설정한 태그는 해당 사용자의 모든 장치에 복사되므로, 이 태그로 범위를 지정하면 사용자의 모든 장치를 함께 홀드아웃하거나 함께 제외하지 않습니다. 어느 경우든 범위 태그에 값이 없는 장치는 마케팅 메시지를 계속 수신하며, 홀드아웃되는 장치는 누군가 컨트롤 그룹을 편집하지 않아도 사용자의 태그 값이 변경됨에 따라 시간이 지나면서 바뀔 수 있습니다.

컨트롤 그룹을 비활성화하면 어떻게 되나요?

해당 그룹은 사용자 홀드아웃을 중단하고, 활성화된 다른 그룹이 해당 사용자를 홀드아웃하지 않는 한 사용자들은 다시 마케팅 메시지를 받기 시작합니다. 활성화된 그룹이 하나도 남지 않으면 마케팅 메시지는 모든 사용자에게 전송됩니다. 그룹의 설정과 통계 기록은 유지됩니다. 나중에 재구성하지 않고 컨트롤 그룹을 다시 활성화하면 멤버십이 동일한 공식으로 계산되므로 정확히 동일한 그룹으로 돌아갑니다. 다시 활성화한 후 다른 그룹을 얻으려면 재구성하세요.

재구성은 무엇을 하나요?

컨트롤 그룹 재구성은 동일한 백분율로 새로운 무작위 샘플을 추출하여 현재 컨트롤 그룹을 다른 사용자 집합으로 대체합니다. 그룹 페이지의 점 3개 메뉴에서 사용할 수 있습니다. 동일한 사용자가 오랫동안 마케팅에서 제외되었을 때 새로운 홀드아웃 범위를 원할 때 사용하세요. 재구성은 또한 컨트롤 그룹 분석을 위한 측정 기간을 다시 시작합니다.

컨트롤 그룹에 어떤 사용자가 있는지 어떻게 확인하나요?

Pushwoosh는 컨트롤 그룹 사용자를 태그하지 않습니다. 설정 > 컨트롤 그룹에서 그룹 페이지를 열고, 점 3개 메뉴를 클릭한 다음 사용자 내보내기를 선택하여 현재 구성원의 CSV를 다운로드하세요. 사용자 내보내기를 사용하려면 역할에 개인 데이터 권한이 필요합니다. 대신 프로그래밍 방식으로 멤버십을 확인하려면 Control Groups API에서 사용자 ID 배치와 함께 CheckControlGroupMembership을 호출하세요.

컨트롤 그룹의 사용자가 여전히 마케팅 메시지를 받는 이유는 무엇인가요?

Pushwoosh는 User ID별로 컨트롤 그룹 멤버십을 계산합니다. 동일한 사람이 하나의 User ID 아래에 연결되지 않은 여러 연락 방법(예: 이메일, 푸시 장치)을 가지고 있는 경우 Pushwoosh는 이들을 다른 사용자로 취급하고 각각에 대해 멤버십을 별도로 계산합니다: 하나는 컨트롤 그룹에 속할 수 있지만 다른 하나는 그렇지 않을 수 있습니다. Pushwoosh가 멤버십을 계산하려면 User ID가 필요하므로 User ID가 전혀 없는 연락 방법은 절대 홀드아웃되지 않습니다. 이를 방지하려면 모든 연락 방법을 동일한 User ID로 등록하세요.

어떤 컨트롤 그룹 백분율을 선택해야 하나요?

적절한 백분율은 목표, 앱 크기 및 결과를 어떻게 사용할 계획인지에 따라 다릅니다. 더 작은 백분율(예: 3%)은 더 많은 사용자를 잠재고객으로 유지하며 도달 범위를 우선시하는 팀에 적합할 수 있습니다. 더 큰 백분율(예: 10%)은 그룹을 비교할 때 더 강력한 통계적 신뢰도를 제공할 수 있습니다. 필요에 맞게 1%에서 20% 사이의 사용자 지정 값을 설정할 수 있습니다.

내 컨트롤 그룹이 내가 설정한 백분율과 정확히 일치하지 않는 이유는 무엇인가요?

페이지에 표시되는 그룹 크기는 해시 공식이 그룹에 할당한 실제 사용자 수이며, 사용자 수에 백분율을 곱한 값이 아닙니다. 작은 앱에서는 이 수가 백분율과 눈에 띄게 다를 수 있습니다. 공식이 정확한 비율을 샘플링하는 대신 개별적으로 사용자를 분배하기 때문입니다. 이 수는 캐시되어 하루에 한 번 정도 새로 고쳐집니다. 페이지에서 즉시 재계산을 트리거할 수 있으며, 실행되는 동안 로딩 표시기와 함께 이전 수를 표시합니다.

이벤트 표에서 데이터 부족은 무엇을 의미하나요?

데이터 부족은 선택한 기간 동안 처리 그룹 또는 컨트롤 그룹 중 하나에서 해당 이벤트에 대한 전환이 10회 미만이거나 비전환이 10회 미만이었음을 의미합니다. 더 많은 데이터가 제공될 때까지 Pushwoosh는 그룹 간의 차이가 통계적으로 유의미한지 판단할 수 없습니다.

상승도는 어떻게 계산되나요?

상승도는 처리 그룹과 컨트롤 그룹 전환율 간의 백분율 차이를 컨트롤 그룹 비율에 상대적으로 보여줍니다. 양수 값은 처리 그룹이 더 잘 전환되었음을 의미합니다. Pushwoosh는 이를 (conv. treatment − conv. control) / conv. control × 100%로 계산합니다.

메시징에 의한 전환은 무엇을 의미하나요?

메시징에 의한 전환은 메시징 없이 예상되는 수를 초과하여 메시지에 의해 생성된 추가 이벤트의 추정 수입니다. Pushwoosh는 이를 (events per user in treatment − events per user in control) × treatment group size로 계산합니다. 백분율은 모든 처리 이벤트 중 이러한 추가 이벤트의 비율을 보여줍니다.

어떤 이벤트를 비교할 수 있으며 몇 개까지 가능한가요?

Customer Journey에서 전환 목표로 설정된 이벤트는 표에 자동으로 표시됩니다. 비교할 이벤트 추가를 클릭하여 다른 이벤트를 총 10개까지 추가할 수 있습니다. 메시지 참여 이벤트(예: 열람, 클릭, 발송, 반송)는 목표로 설정되었더라도 제외됩니다. 컨트롤 그룹 사용자는 반응할 마케팅 메시지를 절대 받지 않기 때문입니다.