Perguntas frequentes sobre grupos de controle

Posso reter usuários apenas para uma jornada em vez de todo o meu aplicativo?

Sim. Use o elemento Holdout Split dentro do Customer Journey Builder para reter uma parcela dos usuários em um ponto de uma única jornada, em vez de reter usuários em todos os envios de marketing do aplicativo. Ele reporta seu próprio uplift de meta, separado desta página.

Um aplicativo pode ter mais de um grupo de controle?

Sim. Clique em Adicionar grupo de controle em Configurações > Grupos de controle para adicionar outro, por exemplo, um por mercado.

• Todo grupo ativado se aplica a todo envio de marketing do aplicativo, cada um dentro de seus próprios países e tag. Você não escolhe um grupo por mensagem.
• Um usuário é retido se qualquer grupo o selecionar.
• Os grupos podem se sobrepor. O Pushwoosh avisa você e mostra Sobrepõe-se a N grupos na lista, porque os usuários que correspondem a ambos os grupos distorcem as estatísticas dos dois.

Veja como vários grupos de controle funcionam juntos.

Posso excluir o grupo de controle?

Sim, a partir do menu de três pontos na página do grupo. Esta ação não pode ser desfeita: o grupo deixa de reter usuários, e todas as suas estatísticas são perdidas. Os outros grupos do aplicativo continuam funcionando. Se não restar nenhum grupo ativado, as mensagens de marketing vão para todos os usuários. Para interromper o grupo e manter seu histórico, clique em Desativar em vez disso na caixa de diálogo de exclusão, ou desative-o no menu de três pontos.

Posso renomear um grupo de controle?

Sim. Na página do grupo, clique no menu de três pontos e selecione Renomear. Muda apenas o nome que você vê no Pushwoosh: os usuários do grupo, seu ciclo atual e suas estatísticas permanecem os mesmos.

Quais usuários estão no grupo de controle?

O Pushwoosh não mantém uma lista armazenada de membros do grupo de controle. Ele usa uma fórmula, um cálculo que sempre dá a mesma resposta para as mesmas entradas, com base no seu aplicativo, no ID do usuário e nas configurações atuais do grupo. Isso se aplica a toda a sua base de usuários existente no momento em que você ativa o grupo, não apenas a novas inscrições, e o resultado permanece o mesmo para um determinado usuário até que você reorganize o grupo ou altere seu tamanho, o ID do usuário mude, ou um ciclo de Atualização automática termine ou um Experimento atinja sua data de término.

Os usuários do grupo de controle recebem mensagens transacionais?

Sim. Mensagens transacionais (por exemplo, redefinições de senha, confirmações de pedido) são entregues a todos os usuários, incluindo o grupo de controle. Apenas as mensagens de marketing são bloqueadas para os usuários do grupo de controle.

Onde eu defino o tipo de mensagem de marketing ou transacional?

Você o escolhe onde quer que envie mensagens. Para cada canal, veja Onde definir o tipo de mensagem.

O que acontece com as campanhas criadas antes de eu ativar o grupo de controle?

As campanhas criadas antes de você ativar o grupo de controle funcionam exatamente como as novas: o Pushwoosh verifica o tipo de mensagem de uma campanha no momento do envio, não no momento da criação.

• Mensagem de marketing (ou nenhum tipo de mensagem, o que pode acontecer para campanhas criadas via API): o grupo de controle exclui esses usuários imediatamente.
• Mensagem transacional: os usuários do grupo de controle continuam a recebê-la como antes.

Edite a campanha e defina o tipo de mensagem como Mensagem transacional se quiser que ela alcance todos, incluindo o grupo de controle.

Posso alterar o tamanho do grupo de controle depois de ativá-lo?

Sim. Abra a página do grupo em Configurações > Grupos de controle, clique em Configurações do grupo de controle, escolha uma nova porcentagem (1% a 20%) e clique em Aplicar. O Pushwoosh recalcula a associação para toda a sua base de usuários com base na nova porcentagem: aumentar o grupo adiciona usuários sem remover ninguém que já esteja nele, e diminuí-lo libera alguns membros existentes. Isso pode afetar a comparação com campanhas anteriores, portanto, altere o tamanho apenas quando necessário.

Quais modos de grupo de controle estão disponíveis?

Três. Permanente mantém o mesmo grupo até que você o desative. Atualização automática substitui o grupo por um novo automaticamente ao final de cada ciclo (1, 2 ou 3 meses), devolvendo o grupo anterior às mensagens. Experimento com data de término mantém o grupo até uma data que você define (pelo menos 30 dias à frente) e, depois, devolve todos às mensagens automaticamente. Defina o modo ao criar o grupo, ou mais tarde em Configurações do grupo de controle, a mesma caixa de diálogo usada para editar o tamanho e os países do grupo. Alterar o modo encerra o ciclo atual do grupo, assim como redimensioná-lo ou redefinir seu escopo.

Como vejo os ciclos anteriores de um grupo de controle?

1. Abra a página do grupo.
2. Clique no seletor de período no canto superior direito. Ele tem o rótulo Ciclo atual para um grupo de Atualização automática, Experimento atual para um grupo de Experimento com data de término, e nenhum rótulo para um grupo Permanente.
3. Escolha um ciclo em Anteriores. Os ciclos encerrados são listados por número, como Ciclo ou Experimento.

Um grupo Permanente também pode ter ciclos anteriores, porque redimensionar, redefinir o escopo ou alterar o modo inicia um novo ciclo.

Por que os resultados do meu grupo de controle recomeçaram?

A janela de medição é reiniciada sempre que os membros ou o público do grupo mudam:

• você redimensiona o grupo ou altera seus países ou tag;
• você reorganiza o grupo;
• você altera o modo;
• um ciclo de Atualização automática termina ou um Experimento atinge sua data de término.

Os dados de antes desse ponto não correspondem mais ao grupo atual, então não são incluídos. Os ciclos encerrados continuam disponíveis em Anteriores no seletor de período na página do grupo.

O que acontece quando um Experimento com data de término termina?

Na data Até que você definiu, todos no grupo voltam automaticamente a receber mensagens de marketing. O experimento então aparece em Anteriores no seletor de período na página do grupo, com o nome Experimento e seu próprio número, para que você ainda possa revisar seus resultados.

Posso definir o escopo do grupo de controle para países específicos?

Sim. Defina Países ao criar o grupo, ou mais tarde: abra a página do grupo em Configurações > Grupos de controle e clique em Configurações do grupo de controle. Deixe em branco para reter usuários em todo o seu público, ou selecione um ou mais países para reter apenas os dispositivos de lá. O escopo por país é uma verificação por dispositivo além da fórmula de porcentagem: ele não altera quem a fórmula seleciona, apenas quais de seus dispositivos são excluídos do marketing. A alteração de Países reinicia a medição de uplift, uma vez que o público comparado muda.

O que acontece com um dispositivo sem dados de país?

Ele nunca é retido, mesmo quando Países está definido e seu usuário é selecionado de outra forma. O Pushwoosh verifica a tag de sistema País de um dispositivo em relação ao escopo, e um dispositivo sem essa tag não tem nada para verificar, então ele continua recebendo mensagens de marketing.

Posso definir o escopo do grupo de controle por tag?

Sim. Defina Tag ao criar o grupo, ou mais tarde: abra a página do grupo em Configurações > Grupos de controle e clique em Configurações do grupo de controle. Escolha qualquer tag do tipo string ou boolean, exceto País, e depois escolha um ou mais valores. Funciona como o escopo por país: uma verificação por dispositivo além da fórmula de porcentagem, combinada com Países se você definir ambos. Um dispositivo sem valor para a tag, ou com um valor que você não incluiu, continua recebendo mensagens de marketing, mesmo que seu usuário seja selecionado de outra forma.

Como o escopo por tag interage com tags de dispositivo e de usuário?

Uma tag definida por dispositivo descreve apenas aquele dispositivo, então o escopo por ela retém os dispositivos um a um. Uma tag definida por usuário é copiada para todos os dispositivos desse usuário, então o escopo por ela retém ou poupa todos os dispositivos do usuário juntos. Em ambos os casos, um dispositivo sem valor para a tag de escopo continua recebendo mensagens de marketing, e quais dispositivos são retidos pode mudar ao longo do tempo conforme o valor da tag de um usuário muda, sem que ninguém edite o grupo de controle.

O que acontece se eu desativar o grupo de controle?

Esse grupo deixa de reter usuários, e eles começam a receber mensagens de marketing novamente, a menos que outro grupo ativado os retenha. Se não restar nenhum grupo ativado, as mensagens de marketing vão para todos os usuários. O grupo mantém suas configurações e o histórico de estatísticas. Se você reativar o grupo de controle mais tarde sem reorganizar, você terá de volta exatamente o mesmo grupo, porque a associação é calculada pela mesma fórmula. Para obter um grupo diferente após a reativação, reorganize-o.

O que o Reorganizar faz?

Reorganizar grupo de controle seleciona uma nova amostra aleatória com a mesma porcentagem, substituindo o grupo de controle atual por um conjunto diferente de usuários. Está disponível no menu de três pontos na página do grupo. Use-o quando os mesmos usuários foram excluídos do marketing por um longo tempo e você deseja uma nova cobertura de retenção. A reorganização também reinicia a janela de medição para as análises do grupo de controle.

Como vejo quais usuários estão no grupo de controle?

O Pushwoosh não marca os usuários do grupo de controle. Abra a página do grupo em Configurações > Grupos de controle, clique no menu de três pontos e selecione Exportar usuários para baixar um CSV dos membros atuais. Exportar usuários requer a permissão Dados pessoais na sua função. Para verificar a associação programaticamente, chame CheckControlGroupMembership da API de Grupos de Controle com um lote de IDs de usuário.

Por que um usuário no grupo de controle ainda pode receber mensagens de marketing?

O Pushwoosh calcula a associação ao grupo de controle por User ID. Se a mesma pessoa tiver vários métodos de contato (por exemplo, e-mail, dispositivo de push) que não estão vinculados sob um único User ID, o Pushwoosh os trata como usuários diferentes e calcula a associação para cada um separadamente: um pode cair no grupo de controle enquanto outro não. Um método de contato sem nenhum User ID nunca é retido, pois o Pushwoosh precisa de um User ID para calcular a associação. Para evitar isso, registre todos os métodos de contato com o mesmo User ID.

Qual porcentagem do grupo de controle devo escolher?

A porcentagem certa depende de seus objetivos, tamanho do aplicativo e como você planeja usar os resultados. Uma porcentagem menor (por exemplo, 3%) mantém mais usuários no público e pode ser adequada para equipes que priorizam o alcance. Uma porcentagem maior (por exemplo, 10%) pode dar maior confiança estatística ao comparar grupos. Você pode definir um valor Personalizado entre 1% e 20% para atender às suas necessidades.

Por que meu grupo de controle não tem exatamente a porcentagem que eu defini?

O tamanho do grupo exibido na página é o número real de usuários que a fórmula de hash atribuiu ao grupo, não a porcentagem multiplicada pela sua contagem de usuários. Em aplicativos menores, essa contagem pode diferir visivelmente da porcentagem, pois a fórmula distribui os usuários individualmente em vez de amostrar uma parcela exata. A contagem é armazenada em cache e atualizada cerca de uma vez por dia. Você pode acionar um recálculo imediato na página, que mostra a contagem anterior com um indicador de carregamento enquanto é executado.

O que significa Dados insuficientes na tabela de eventos?

Dados insuficientes significa que o grupo de tratamento ou de controle teve menos de 10 conversões ou menos de 10 não conversões para aquele evento durante o período de tempo selecionado. O Pushwoosh não pode determinar se a diferença entre os grupos é estatisticamente significativa até que mais dados estejam disponíveis.

Como o Uplift é calculado?

Uplift mostra a diferença percentual entre as taxas de conversão do tratamento e do controle, em relação à taxa de controle. Um valor positivo significa que o grupo de tratamento converteu melhor. O Pushwoosh o calcula como (conv. treatment − conv. control) / conv. control × 100%.

O que significa Conversões impulsionadas por mensagens?

Conversões impulsionadas por mensagens é o número estimado de eventos adicionais gerados por suas mensagens além do número esperado sem mensagens. O Pushwoosh o calcula como (events per user in treatment − events per user in control) × treatment group size. A porcentagem mostra esses eventos adicionais como uma parcela de todos os eventos de tratamento.

Quais eventos posso comparar e quantos?

Os eventos definidos como Metas de Conversão na Jornada do Cliente aparecem na tabela automaticamente. Clique em Adicionar eventos para comparar para adicionar qualquer outro evento, até 10 eventos no total. Eventos de engajamento de mensagens (por exemplo, aberturas, cliques, envios, bounces) são excluídos mesmo se definidos como uma meta, já que os usuários do grupo de controle nunca recebem mensagens de marketing para reagir.