Saltar al contenido

Grupos de control

Un grupo de control excluye una parte fija de sus usuarios de los mensajes de marketing en Push, Email, In-App, SMS y WhatsApp. Pushwoosh compara a esos usuarios con todos los demás en su aplicación que siguen recibiendo campañas, para que pueda medir si sus mensajes generan resultados.

Los usuarios del grupo de control siguen recibiendo mensajes transaccionales en esos canales cuando usted configura el tipo de mensaje correspondiente.

Cómo funciona la pertenencia al grupo de control

Anchor link to

Pushwoosh no mantiene una lista de quién está en el grupo de control. En su lugar, en cada comprobación combina su aplicación, el número de versión actual del grupo y el ID de usuario, los procesa a través de una fórmula de hash para producir un número y comprueba si ese número se encuentra dentro del porcentaje que usted estableció (por ejemplo, 5 %). Si es así, el usuario está en el grupo de control. Si no, no lo está. Debido a que es una fórmula en lugar de una lista guardada, activar el grupo se aplica a toda su base de usuarios existente de inmediato, no solo a las personas que se registran después.

El resultado de cada usuario permanece igual a lo largo del tiempo: una vez asignado, un usuario permanece dentro o fuera del grupo de control hasta que usted redistribuya el grupo, cambie su tamaño o cambie el ID del usuario. Por lo tanto, si desactiva el grupo y lo vuelve a activar más tarde sin redistribuirlo, obtendrá exactamente el mismo grupo que antes, ya que la fórmula en sí no ha cambiado.

Cómo afecta el grupo de control a la entrega de mensajes

Anchor link to

La pertenencia al grupo de control bloquea o permite mensajes según el tipo de mensaje que establezca para cada envío.

  • Mensaje de marketing: bloqueado para los usuarios del grupo de control en Push, Email, In-App, SMS y WhatsApp.

  • Mensaje transaccional: se sigue entregando en esos canales. Seleccione Mensaje transaccional al crear un customer journey o enviar un mensaje único.

Elija Mensaje de marketing o Mensaje transaccional para cada envío en esos canales. Consulte dónde configurar el tipo de mensaje.

Aprenda más sobre los mensajes de marketing y transaccionales.

Crear un grupo de control

Anchor link to

Cree un grupo de control para comenzar a excluir a una parte de sus usuarios de los mensajes de marketing. El Panel de Control crea uno por aplicación. Nuevo grupo deja de aparecer una vez que lo tiene.

  1. Navegue a Configuración > Grupos de control.
  2. Haga clic en Nuevo grupo.

Lista de Grupos de control sin grupos todavía y una flecha apuntando al botón Nuevo grupo

  1. Establezca el Tamaño del grupo de control: la proporción de usuarios excluidos de los mensajes de marketing, del 1 % al 20 %.

Diálogo de nuevo grupo de control con un campo de tamaño de grupo de control

  1. Haga clic en Crear. El grupo comienza a excluir a sus miembros de los mensajes de marketing de inmediato.

Gestionar el grupo de control

Anchor link to

Abra Configuración > Grupos de control y haga clic en la fila del grupo para acceder a su propia página, donde se aplican las secciones siguientes.

Editar el tamaño y los países del grupo de control

Anchor link to

Puede ajustar el tamaño de un grupo de control y los países que excluye en cualquier momento desde su página.

  1. Haga clic en Configuración del grupo de control en la esquina superior derecha. El botón también muestra el porcentaje actual del grupo, por ejemplo, Configuración del grupo de control: 10 %.
  2. Elija un nuevo porcentaje:
  • 3 % (Alcance máximo): el grupo de exclusión más pequeño para audiencias sensibles o de alto valor.
  • 5 % (Recomendado para la mayoría de las aplicaciones): una mezcla optimizada entre la confianza en la medición y el alcance de los usuarios.
  • 10 % (Mayor confianza): un grupo de control más grande para una validación del ROI más clara y fiable.
  • Personalizado (1 %–20 %): establezca un tamaño de grupo de control personalizado para una medición flexible.
  1. En Países, seleccione uno o más países para limitar el grupo de control, o déjelo vacío para excluir usuarios de toda su audiencia.
  2. Haga clic en Aplicar para confirmar los cambios.

Diálogo de configuración del grupo de control con las opciones de porcentaje y un campo de Países que muestra Azerbaiyán y Kazajistán seleccionados

Limitar el grupo de control por país

Anchor link to

El alcance por país es una segunda comprobación por dispositivo, además de la pertenencia al grupo de control. Configúrelo en el mismo diálogo de Configuración del grupo de control descrito en Editar el tamaño y los países del grupo de control.

  • Países vacíos: se excluye a todos los usuarios que la fórmula de porcentaje selecciona, independientemente de su ubicación.
  • Países no vacíos: solo se excluyen los dispositivos cuya etiqueta de País del sistema coincida con uno de los países seleccionados. Un dispositivo fuera de los países seleccionados sigue recibiendo mensajes de marketing, incluso si su usuario es uno de los seleccionados por la fórmula de porcentaje.

Recalcular el tamaño del grupo

Anchor link to

El Tamaño del grupo de control muestra un número guardado que Pushwoosh actualiza aproximadamente una vez al día. Justo después de cambiar el tamaño del grupo, o cuando muchos usuarios nuevos se unen a su aplicación, este número puede estar desactualizado.

Para actualizarlo de inmediato, haga clic en Recalcular junto al tamaño del grupo.

Redistribuir el grupo de control

Anchor link to

Redistribuir grupo de control elige un nuevo conjunto aleatorio de usuarios, manteniendo el mismo porcentaje. Todos los que están actualmente en el grupo lo abandonan, y un conjunto diferente de usuarios ocupa su lugar. Úselo cuando las mismas personas hayan sido excluidas de sus mensajes de marketing durante mucho tiempo.

  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Redistribuir grupo de control.

Menú de tres puntos con la opción Redistribuir grupo de control en la página de un grupo de control

  1. Confirme en el diálogo que aparece.

Exportar usuarios del grupo de control

Anchor link to

Pushwoosh no etiqueta a los usuarios del grupo de control. Exporte desde esta página para obtener una lista única, o llame a CheckControlGroupMembership para verificar un lote de ID de usuario de forma programática.

  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Exportar usuarios.
  3. Cuando la exportación finalice, haga clic en Descargar CSV para guardar el archivo.

Notificación de exportación completada con el botón Descargar CSV en la página de un grupo de control

Desactivar un grupo de control

Anchor link to
  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Desactivar grupo de control.

Menú de tres puntos con la opción Desactivar grupo de control en la página de un grupo de control

La desactivación impide que ese grupo excluya a cualquier usuario de inmediato, y comienzan a recibir mensajes de marketing de nuevo. Si lo vuelve a activar más tarde sin redistribuirlo, Pushwoosh reproduce exactamente el mismo grupo, ya que la pertenencia se calcula con la misma fórmula. Para obtener un grupo diferente después de volver a activarlo, redistribúyalo.

Eliminar el grupo de control

Anchor link to

Eliminar el grupo de control lo elimina a él y a su configuración de forma permanente.

  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Eliminar grupo.
  3. Confirme en el diálogo que aparece. Esto no se puede deshacer.

Analizar el impacto del grupo de control

Anchor link to

La página de cada grupo de control muestra cómo se desempeñan sus mensajes en comparación con ese grupo. La página tiene dos bloques: una tabla de comparación de eventos en la parte superior y un Informe de impacto debajo. Ambos comparan dos grupos de usuarios en cualquier evento que elija:

  • Grupo de tratamiento: todos los usuarios que no están en el grupo de control. Siguen recibiendo sus mensajes de marketing (Push, Email, In-App, SMS, WhatsApp) como de costumbre.
  • Grupo de control: el grupo de exclusión que configuró anteriormente. Estos usuarios están excluidos de los mensajes de marketing, por lo que cualquier diferencia en su comportamiento no está influenciada por sus campañas.

Comparar eventos

Anchor link to
  1. Seleccione un período de tiempo: Últimos 3 días, Últimos 7 días o Últimos 30 días.
  2. Revise la tabla de comparación de eventos. Solo muestra eventos automáticamente si ha establecido Objetivos de Conversión en Customer Journey. De lo contrario, la tabla comienza vacía.
  3. Haga clic en Añadir eventos para comparar para añadir cualquier evento que desee medir. Puede añadir hasta 10 eventos en total.

Página del grupo de control con una tabla que compara eventos entre el tratamiento y el control

La tabla muestra estas métricas para cada evento:

  • Conv. Tratamiento: la tasa de conversión en el grupo de tratamiento. Esta es la proporción de usuarios únicos que recibieron sus mensajes de marketing (Push, Email, In-App, SMS, WhatsApp) y activaron el evento al menos una vez.
  • Conv. Control: la tasa de conversión en el grupo de control. Esta es la proporción de usuarios únicos que fueron excluidos de los mensajes de marketing y activaron el evento al menos una vez de todos modos, sin ninguna influencia de los mensajes.
  • Uplift: la diferencia porcentual entre las tasas de conversión del tratamiento y del control, en relación con la tasa de control. Un valor positivo significa que el grupo de tratamiento convirtió mejor. Se calcula como (conv. tratamiento − conv. control) / conv. control × 100 %.
  • Significancia: si la diferencia es estadísticamente fiable:
    • Significativo: es poco probable que el uplift se deba al azar.
    • No significativo: la diferencia aún no es estadísticamente fiable.
    • No hay suficientes datos: cualquiera de los grupos tiene menos de 10 conversiones o menos de 10 no conversiones para este evento, por lo que no se puede calcular la significancia.

Ver el informe de impacto

Anchor link to

Use el menú desplegable Ver evento para seleccionar un evento de la tabla. El Informe de impacto a continuación muestra un desglose más profundo para ese evento.

Informe de impacto que muestra el uplift, las conversiones impulsadas por los mensajes y una tabla de desglose de grupos

  • Uplift (cambio respecto al control): cuánto difiere la tasa de conversión del tratamiento de la tasa de conversión del control. Este es el mismo valor que se muestra en la tabla de eventos.
  • Conversiones impulsadas por los mensajes: el número estimado de eventos adicionales generados por sus mensajes más allá del número esperado sin mensajes. Se calcula como (eventos por usuario en tratamiento − eventos por usuario en control) × tamaño del grupo de tratamiento. El porcentaje muestra estos eventos adicionales como una proporción de todos los eventos de tratamiento.
  • Significancia: indica si la diferencia medida es estadísticamente fiable. El informe muestra Significativo, No significativo o No hay suficientes datos, basado en:
    • Confianza: qué tan seguro está Pushwoosh de que el uplift refleja una diferencia real entre el tratamiento y el control, en lugar de una casualidad, mostrado como un porcentaje. Cuanto mayor sea la confianza, más fuerte será la evidencia.
    • Valor P: muestra la probabilidad de observar esta diferencia por casualidad si los mensajes no tienen un efecto real. Un valor P más bajo proporciona una evidencia más fuerte de que la diferencia no es aleatoria.
  • Puntuación Z: muestra cuán diferentes fueron los resultados de sus dos grupos. Una puntuación cercana a 0 significa que la diferencia podría ser aleatoria. Cuanto más lejos de 0, más seguro puede estar de que un grupo es genuinamente mejor que el otro.
  • Desglose del grupo: compara los grupos de Tratamiento y Control por Usuarios estimados, Número total de eventos, Eventos por usuario y Tasa de conv. (única).

Preguntas frecuentes

Anchor link to

¿Puede una aplicación tener más de un grupo de control?

Anchor link to

En el Panel de Control, no. Crea un grupo de control por aplicación, aplicado automáticamente a cada envío de marketing. Este es un límite de la interfaz, no de la plataforma. El panel no ofrece una forma de dirigir un mensaje específico a un grupo diferente.

¿Puedo eliminar el grupo de control?

Anchor link to

Sí, desde el menú de tres puntos en la página del grupo. Esto no se puede deshacer y deja la aplicación sin una alternativa: los mensajes de marketing se envían a todos hasta que cree un nuevo grupo de control. Para pausar el grupo sin perderlo, desactívelo en lugar de eliminarlo.

¿Qué usuarios están en el grupo de control?

Anchor link to

Pushwoosh no mantiene una lista almacenada de los miembros del grupo de control. Utiliza una fórmula, un cálculo que siempre da la misma respuesta para las mismas entradas, basado en su aplicación, el ID del usuario y la configuración actual del grupo. Esto se aplica a toda su base de usuarios existente en el momento en que habilita el grupo, no solo a los nuevos registros, y el resultado permanece igual para un usuario determinado cada vez, hasta que redistribuya el grupo o cambie su tamaño.

¿Los usuarios del grupo de control reciben mensajes transaccionales?

Anchor link to

Sí. Los mensajes transaccionales (por ejemplo, restablecimiento de contraseñas, confirmaciones de pedidos) se entregan a todos los usuarios, incluido el grupo de control. Solo los mensajes de marketing se bloquean para los usuarios del grupo de control.

¿Dónde configuro el tipo de mensaje de marketing o transaccional?

Anchor link to

Lo elige dondequiera que envíe mensajes. Para cada canal, consulte Dónde configurar el tipo de mensaje.

¿Qué sucede con las campañas creadas antes de que habilitara el grupo de control?

Anchor link to

Las campañas creadas antes de que habilitara el grupo de control funcionan exactamente como las nuevas: Pushwoosh comprueba el tipo de mensaje de una campaña en el momento del envío, no en el momento de la creación.

  • Mensaje de marketing (o ningún tipo de mensaje, lo que puede ocurrir en campañas creadas a través de la API): el grupo de control excluye a esos usuarios de inmediato.
  • Mensaje transaccional: los usuarios del grupo de control siguen recibiéndolo como antes.

Edite la campaña y establezca el tipo de mensaje como Mensaje transaccional si desea que llegue a todos, incluido el grupo de control.

¿Puedo cambiar el tamaño del grupo de control después de habilitarlo?

Anchor link to

Sí. Abra la página del grupo desde Configuración > Grupos de control, haga clic en Configuración del grupo de control, elija un nuevo porcentaje (del 1 % al 20 %) y haga clic en Aplicar. Pushwoosh recalcula la pertenencia para toda su base de usuarios con el nuevo porcentaje: aumentar el grupo añade usuarios sin eliminar a nadie que ya esté en él, y reducirlo libera a algunos miembros existentes. Esto puede afectar la comparación con campañas anteriores, así que cambie el tamaño solo cuando sea necesario.

¿Puedo limitar el grupo de control a países específicos?

Anchor link to

Sí. Abra la página del grupo desde Configuración > Grupos de control, haga clic en Configuración del grupo de control y establezca los Países. Déjelo vacío para excluir usuarios de toda su audiencia, o seleccione uno o más países para excluir solo los dispositivos de allí. El alcance por país es una comprobación por dispositivo además de la fórmula de porcentaje: no cambia a quién selecciona la fórmula, solo cuáles de sus dispositivos se excluyen del marketing. Cambiar los Países reinicia la medición del uplift, ya que la audiencia comparada cambia.

¿Qué sucede con un dispositivo sin datos de país?

Anchor link to

Nunca se excluye, incluso cuando se establecen Países y su usuario es seleccionado de otra manera. Pushwoosh comprueba la etiqueta de País del sistema de un dispositivo con el alcance, y un dispositivo sin esa etiqueta no tiene nada con qué compararse, por lo que sigue recibiendo mensajes de marketing.

¿Qué sucede si deshabilito el grupo de control?

Anchor link to

Pushwoosh deja de excluir a los usuarios y todos comienzan a recibir mensajes de marketing de nuevo. Si vuelve a habilitar el grupo de control más tarde sin redistribuirlo, obtendrá exactamente el mismo grupo, porque la pertenencia se calcula con la misma fórmula. Para obtener un grupo diferente después de volver a habilitarlo, redistribúyalo.

¿Qué hace la opción Redistribuir?

Anchor link to

Redistribuir grupo de control extrae una muestra aleatoria completamente nueva con el mismo porcentaje, reemplazando el grupo de control actual con un conjunto diferente de usuarios. Está disponible en el menú de tres puntos en la página del grupo. Úselo cuando los mismos usuarios hayan sido excluidos del marketing durante mucho tiempo y desee una nueva cobertura de exclusión. La redistribución también reinicia la ventana de medición para los análisis del grupo de control.

¿Cómo veo qué usuarios están en el grupo de control?

Anchor link to

Pushwoosh no etiqueta a los usuarios del grupo de control. Abra la página del grupo desde Configuración > Grupos de control, haga clic en el menú de tres puntos y seleccione Exportar usuarios para descargar un CSV de los miembros actuales. Para verificar la pertenencia de forma programática, llame a CheckControlGroupMembership con un lote de ID de usuario.

¿Por qué un usuario del grupo de control podría seguir recibiendo mensajes de marketing?

Anchor link to

Pushwoosh calcula la pertenencia al grupo de control por ID de usuario. Si la misma persona tiene varios métodos de contacto (por ejemplo, correo electrónico, dispositivo push) que no están vinculados bajo un mismo ID de usuario, Pushwoosh los trata como usuarios diferentes y calcula la pertenencia para cada uno por separado: uno puede caer en el grupo de control mientras que otro no. Un método de contacto sin ningún ID de usuario nunca se excluye, ya que Pushwoosh necesita un ID de usuario para calcular la pertenencia. Para evitar esto, registre todos los métodos de contacto con el mismo ID de usuario.

¿Qué porcentaje de grupo de control debo elegir?

Anchor link to

El porcentaje correcto depende de sus objetivos, el tamaño de la aplicación y cómo planea usar los resultados. Un porcentaje más pequeño (por ejemplo, 3 %) mantiene a más usuarios en la audiencia y puede ser adecuado para equipos que priorizan el alcance. Un porcentaje más grande (por ejemplo, 10 %) puede dar una confianza estadística más fuerte al comparar grupos. Puede establecer un valor Personalizado entre el 1 % y el 20 % para que se ajuste a sus necesidades.

¿Por qué mi grupo de control no es exactamente el porcentaje que establecí?

Anchor link to

El tamaño del grupo que se muestra en la página es el número real de usuarios que la fórmula de hash asignó al grupo, no el porcentaje multiplicado por su número de usuarios. En aplicaciones más pequeñas, este número puede diferir visiblemente del porcentaje, ya que la fórmula distribuye a los usuarios individualmente en lugar de tomar una muestra de una parte exacta. El recuento se almacena en caché y se actualiza aproximadamente una vez al día; puede activar un recálculo inmediato desde la página, que muestra el recuento anterior con un indicador de carga mientras se ejecuta.

¿Qué significa No hay suficientes datos en la tabla de eventos?

Anchor link to

No hay suficientes datos significa que el grupo de tratamiento o el de control tuvieron menos de 10 conversiones o menos de 10 no conversiones para ese evento durante el período de tiempo seleccionado. Pushwoosh no puede determinar si la diferencia entre los grupos es estadísticamente significativa hasta que haya más datos disponibles.

¿Cómo se calcula el Uplift?

Anchor link to

El Uplift muestra la diferencia porcentual entre las tasas de conversión del tratamiento y del control, en relación con la tasa de control. Un valor positivo significa que el grupo de tratamiento convirtió mejor. Pushwoosh lo calcula como (conv. tratamiento − conv. control) / conv. control × 100 %.

¿Qué significa Conversiones impulsadas por los mensajes?

Anchor link to

Conversiones impulsadas por los mensajes es el número estimado de eventos adicionales generados por sus mensajes más allá del número esperado sin mensajes. Pushwoosh lo calcula como (eventos por usuario en tratamiento − eventos por usuario en control) × tamaño del grupo de tratamiento. El porcentaje muestra estos eventos adicionales como una proporción de todos los eventos de tratamiento.

¿Qué eventos puedo comparar y cuántos?

Anchor link to

Puede comparar los eventos configurados como Objetivos de Conversión en Customer Journey. Puede añadir hasta 10 eventos a la tabla de comparación. Los eventos de interacción con mensajes (por ejemplo, aperturas, clics, envíos, rebotes) se excluyen aunque se establezcan como un objetivo, ya que los usuarios del grupo de control nunca reciben mensajes de marketing a los que reaccionar.