Saltar al contenido

Grupos de control

Un grupo de control excluye una parte fija de sus usuarios de los mensajes de marketing en Push, Email, In-App, SMS y WhatsApp. Pushwoosh compara a esos usuarios con todos los demás en su aplicación que siguen recibiendo campañas, para que pueda medir si sus mensajes generan resultados.

Los usuarios del grupo de control siguen recibiendo mensajes transaccionales en esos canales cuando usted configura el tipo de mensaje correspondiente.

Cómo funciona la membresía del grupo de control

Anchor link to

Pushwoosh no mantiene una lista de quién está en el grupo de control. En su lugar, en cada verificación combina su aplicación, el número de versión actual del grupo y el ID de usuario, los procesa a través de una fórmula de hash para producir un número y comprueba si ese número se encuentra dentro del porcentaje que usted estableció (por ejemplo, 5 %). Si es así, el usuario está en el grupo de control. Si no, no lo está. Debido a que es una fórmula en lugar de una lista guardada, activar el grupo se aplica a toda su base de usuarios existente de inmediato, no solo a las personas que se registran después.

El resultado de cada usuario permanece igual a lo largo del tiempo: una vez asignado, un usuario permanece dentro o fuera del grupo de control hasta que usted reorganice el grupo, cambie su tamaño o cambie el ID del usuario. Por lo tanto, si desactiva el grupo y lo vuelve a activar más tarde sin reorganizarlo, obtendrá exactamente el mismo grupo que antes, ya que la fórmula en sí no ha cambiado.

Cómo afecta el grupo de control a la entrega de mensajes

Anchor link to

La membresía en el grupo de control bloquea o permite mensajes según el tipo de mensaje que establezca para cada envío.

  • Mensaje de marketing: bloqueado para los usuarios del grupo de control en Push, Email, In-App, SMS y WhatsApp.

  • Mensaje transaccional: se sigue entregando en esos canales. Seleccione Mensaje transaccional al crear un customer journey o enviar un mensaje único.

Elija Mensaje de marketing o Mensaje transaccional para cada envío en esos canales. Consulte dónde configurar el tipo de mensaje.

Obtenga más información sobre los mensajes de marketing y transaccionales.

Crear un grupo de control

Anchor link to

Cree un grupo de control para comenzar a excluir a una parte de sus usuarios de los mensajes de marketing. Una aplicación solo puede tener uno. La opción Nuevo grupo deja de aparecer una vez que lo tiene.

  1. Vaya a Ajustes > Grupos de control.
  2. Haga clic en Nuevo grupo.

Lista de Grupos de control sin grupos todavía y una flecha apuntando al botón Nuevo grupo

  1. Establezca el Tamaño del grupo de control: la proporción de usuarios excluidos de los mensajes de marketing, del 1 % al 20 %.

Diálogo de nuevo grupo de control con un campo de tamaño de grupo de control

  1. Haga clic en Crear. El grupo comienza a excluir a sus miembros de los mensajes de marketing de inmediato.

Gestionar el grupo de control

Anchor link to

Abra Ajustes > Grupos de control y haga clic en la fila del grupo para acceder a su propia página, donde se aplican las secciones siguientes.

Editar el tamaño del grupo de control

Anchor link to

Puede ajustar el tamaño de un grupo de control en cualquier momento desde su página.

  1. Haga clic en Ajustes del grupo de control en la esquina superior derecha. El botón también muestra el porcentaje actual del grupo, por ejemplo, Ajustes del grupo de control: 10 %.
  2. Elija un nuevo porcentaje:
  • 3 % (Alcance máximo): el grupo de exclusión más pequeño para audiencias sensibles o de alto valor.
  • 5 % (Recomendado para la mayoría de las aplicaciones): una combinación optimizada entre la confianza en la medición y el alcance de los usuarios.
  • 10 % (Mayor confianza): un grupo de control más grande para una validación del ROI más clara y fiable.
  • Personalizado (1 %–20 %): establezca un tamaño de grupo de control personalizado para una medición flexible.
  1. Haga clic en Aplicar para confirmar los cambios.

Botón de ajustes del grupo de control y las opciones de porcentaje disponibles para un grupo de control

Recalcular el tamaño del grupo

Anchor link to

El Tamaño del grupo de control muestra un número guardado que Pushwoosh actualiza aproximadamente una vez al día. Justo después de cambiar el tamaño del grupo, o cuando muchos usuarios nuevos se unen a su aplicación, este número puede estar desactualizado.

Para actualizarlo de inmediato, haga clic en Recalcular junto al tamaño del grupo.

Reorganizar el grupo de control

Anchor link to

Reorganizar el grupo de control selecciona un nuevo conjunto aleatorio de usuarios, manteniendo el mismo porcentaje. Todos los que están actualmente en el grupo lo abandonan, y un conjunto diferente de usuarios ocupa su lugar. Úselo cuando las mismas personas hayan sido excluidas de sus mensajes de marketing durante mucho tiempo.

  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Reorganizar el grupo de control.

Menú de tres puntos con la opción Reorganizar el grupo de control en la página de un grupo de control

  1. Confirme en el diálogo que aparece.

Exportar usuarios del grupo de control

Anchor link to

Pushwoosh no etiqueta a los usuarios del grupo de control, por lo que exportar desde esta página es la única forma de obtener una lista de los miembros actuales.

  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Exportar usuarios.
  3. Cuando finalice la exportación, haga clic en Descargar CSV para guardar el archivo.

Notificación de exportación completada con el botón Descargar CSV en la página de un grupo de control

Desactivar un grupo de control

Anchor link to
  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Desactivar el grupo de control.

Menú de tres puntos con la opción Desactivar el grupo de control en la página de un grupo de control

La desactivación impide que ese grupo excluya a los usuarios de inmediato, y estos comienzan a recibir mensajes de marketing de nuevo. Si lo vuelve a activar más tarde sin reorganizarlo, Pushwoosh reproduce exactamente el mismo grupo, ya que la membresía se calcula con la misma fórmula. Para obtener un grupo diferente después de volver a activarlo, reorganícelo.

Eliminar el grupo de control

Anchor link to

Eliminar el grupo de control lo elimina a él y a su configuración de forma permanente.

  1. Haga clic en el menú de tres puntos en la esquina superior derecha.
  2. Seleccione Eliminar grupo.
  3. Confirme en el diálogo que aparece. Esta acción no se puede deshacer.

Analizar el impacto del grupo de control

Anchor link to

La página de cada grupo de control muestra cómo se desempeñan sus mensajes en comparación con ese grupo. La página tiene dos bloques: una tabla de comparación de eventos en la parte superior y un Informe de impacto debajo. Ambos comparan dos grupos de usuarios en cualquier evento que elija:

  • Grupo de tratamiento: todos los usuarios que no están en el grupo de control. Siguen recibiendo sus mensajes de marketing (Push, Email, In-App, SMS, WhatsApp) como de costumbre.
  • Grupo de control: el grupo de exclusión que configuró anteriormente. Estos usuarios están excluidos de los mensajes de marketing, por lo que cualquier diferencia en su comportamiento no está influenciada por sus campañas.

Comparar eventos

Anchor link to
  1. Seleccione un período de tiempo: Últimos 3 días, Últimos 7 días o Últimos 30 días.
  2. Revise la tabla de comparación de eventos. Solo muestra eventos automáticamente si ha establecido Objetivos de Conversión en Customer Journey. De lo contrario, la tabla comienza vacía.
  3. Haga clic en Añadir eventos para comparar para añadir cualquier evento que desee medir. Puede añadir hasta 10 eventos en total.

Página del grupo de control con una tabla que compara eventos entre el tratamiento y el control

La tabla muestra estas métricas para cada evento:

  • Conv. Treatment: la tasa de conversión en el grupo de tratamiento. Esta es la proporción de usuarios únicos que recibieron sus mensajes de marketing (Push, Email, In-App, SMS, WhatsApp) y activaron el evento al menos una vez.
  • Conv. Control: la tasa de conversión en el grupo de control. Esta es la proporción de usuarios únicos que fueron excluidos de los mensajes de marketing y activaron el evento al menos una vez de todos modos, sin ninguna influencia de los mensajes.
  • Uplift: la diferencia porcentual entre las tasas de conversión del tratamiento y del control, en relación con la tasa de control. Un valor positivo significa que el grupo de tratamiento convirtió mejor. Se calcula como (conv. tratamiento − conv. control) / conv. control × 100 %.
  • Significance: si la diferencia es estadísticamente fiable:
    • Significant: es poco probable que el aumento se deba al azar.
    • Not significant: la diferencia aún no es estadísticamente fiable.
    • Not enough data: cualquiera de los grupos tiene menos de 10 conversiones o menos de 10 no conversiones para este evento, por lo que no se puede calcular la significancia.

Ver el informe de impacto

Anchor link to

Use el menú desplegable Ver evento para seleccionar un evento de la tabla. El Informe de impacto a continuación muestra un desglose más profundo para ese evento.

Informe de impacto que muestra el uplift, las conversiones impulsadas por los mensajes y una tabla de desglose de grupos

  • Uplift (cambio respecto al control): cuánto difiere la tasa de conversión del tratamiento de la tasa de conversión del control. Este es el mismo valor que se muestra en la tabla de eventos.
  • Conversions driven by messaging: el número estimado de eventos adicionales generados por sus mensajes más allá del número esperado sin mensajes. Se calcula como (eventos por usuario en tratamiento − eventos por usuario en control) × tamaño del grupo de tratamiento. El porcentaje muestra estos eventos adicionales como una proporción de todos los eventos del tratamiento.
  • Significance: indica si la diferencia medida es estadísticamente fiable. El informe muestra Significant, Not significant o Not enough data, según:
    • Confidence: qué tan seguro está Pushwoosh de que el aumento refleja una diferencia real entre el tratamiento y el control, en lugar de una casualidad, mostrado como un porcentaje. Cuanto mayor sea la confianza, más fuerte será la evidencia.
    • P-value: muestra la probabilidad de observar esta diferencia por casualidad si los mensajes no tienen un efecto real. Un valor p más bajo proporciona una evidencia más fuerte de que la diferencia no es aleatoria.
  • Z-score: muestra qué tan separados se desempeñaron sus dos grupos. Una puntuación cercana a 0 significa que la diferencia podría ser aleatoria. Cuanto más lejos de 0, más seguro puede estar de que un grupo es genuinamente mejor que el otro.
  • Group breakdown: compara los grupos de Tratamiento y Control por Usuarios estimados, Número total de eventos, Eventos por usuario y Tasa de conv. (única).

Preguntas frecuentes

Anchor link to

¿Puede una aplicación tener más de un grupo de control?

Anchor link to

No. Una aplicación solo puede tener un grupo de control, que se aplica automáticamente a cada envío de marketing. No hay forma de dirigir un mensaje específico a uno diferente.

¿Puedo eliminar el grupo de control?

Anchor link to

Sí, desde el menú de tres puntos en la página del grupo. Esta acción no se puede deshacer y deja la aplicación sin un respaldo: los mensajes de marketing se enviarán a todos hasta que cree un nuevo grupo de control. Para pausar el grupo sin perderlo, desactívelo en lugar de eliminarlo.

¿Qué usuarios están en el grupo de control?

Anchor link to

Pushwoosh no mantiene una lista almacenada de los miembros del grupo de control. Utiliza una fórmula, un cálculo que siempre da la misma respuesta para las mismas entradas, basado en su aplicación, el ID del usuario y la configuración actual del grupo. Esto se aplica a toda su base de usuarios existente en el momento en que habilita el grupo, no solo a los nuevos registros, y el resultado permanece igual para un usuario determinado cada vez, hasta que reorganice el grupo o cambie su tamaño.

¿Los usuarios del grupo de control reciben mensajes transaccionales?

Anchor link to

Sí. Los mensajes transaccionales (por ejemplo, restablecimiento de contraseñas, confirmaciones de pedidos) se entregan a todos los usuarios, incluido el grupo de control. Solo los mensajes de marketing se bloquean para los usuarios del grupo de control.

¿Dónde configuro el tipo de mensaje de marketing o transaccional?

Anchor link to

Lo elige dondequiera que envíe mensajes. Para cada canal, consulte Dónde configurar el tipo de mensaje.

¿Qué sucede con las campañas creadas antes de que habilitara el grupo de control?

Anchor link to

Las campañas creadas antes de que habilitara el grupo de control funcionan exactamente como las nuevas: Pushwoosh comprueba el tipo de mensaje de una campaña en el momento del envío, no en el momento de la creación.

  • Mensaje de marketing (o ningún tipo de mensaje, lo que puede ocurrir en campañas creadas a través de la API): el grupo de control excluye a esos usuarios de inmediato.
  • Mensaje transaccional: los usuarios del grupo de control siguen recibiéndolo como antes.

Edite la campaña y establezca el tipo de mensaje en Mensaje transaccional si desea que llegue a todos, incluido el grupo de control.

¿Puedo cambiar el tamaño del grupo de control después de habilitarlo?

Anchor link to

Sí. Abra la página del grupo desde Ajustes > Grupos de control, haga clic en Ajustes del grupo de control, elija un nuevo porcentaje (del 1 % al 20 %) y haga clic en Aplicar. Pushwoosh recalcula la membresía para toda su base de usuarios con el nuevo porcentaje: aumentar el grupo añade usuarios sin eliminar a nadie que ya esté en él, y reducirlo libera a algunos miembros existentes. Esto puede afectar la comparación con campañas anteriores, así que cambie el tamaño solo cuando sea necesario.

¿Qué sucede si desactivo el grupo de control?

Anchor link to

Pushwoosh deja de excluir a los usuarios y todos comienzan a recibir mensajes de marketing de nuevo. Si vuelve a habilitar el grupo de control más tarde sin reorganizarlo, recuperará exactamente el mismo grupo, porque la membresía se calcula con la misma fórmula. Para obtener un grupo diferente después de volver a habilitarlo, reorganícelo.

¿Qué hace la opción Reorganizar?

Anchor link to

Reorganizar el grupo de control extrae una muestra aleatoria completamente nueva con el mismo porcentaje, reemplazando el grupo de control actual con un conjunto diferente de usuarios. Está disponible en el menú de tres puntos en la página del grupo. Úselo cuando los mismos usuarios hayan sido excluidos del marketing durante mucho tiempo y desee una nueva cobertura de exclusión. La reorganización también reinicia la ventana de medición para los análisis del grupo de control.

¿Cómo veo qué usuarios están en el grupo de control?

Anchor link to

Pushwoosh no etiqueta a los usuarios del grupo de control. Abra la página del grupo desde Ajustes > Grupos de control, haga clic en el menú de tres puntos y seleccione Exportar usuarios para descargar un CSV de los miembros actuales.

¿Por qué un usuario del grupo de control podría seguir recibiendo mensajes de marketing?

Anchor link to

Pushwoosh calcula la membresía del grupo de control por ID de usuario. Si la misma persona tiene varios métodos de contacto (por ejemplo, correo electrónico, dispositivo push) que no están vinculados bajo un mismo ID de usuario, Pushwoosh los trata como usuarios diferentes y calcula la membresía para cada uno por separado: uno puede caer en el grupo de control mientras que otro no. Un método de contacto sin ningún ID de usuario nunca se excluye, ya que Pushwoosh necesita un ID de usuario para calcular la membresía. Para evitar esto, registre todos los métodos de contacto con el mismo ID de usuario.

¿Qué porcentaje de grupo de control debo elegir?

Anchor link to

El porcentaje correcto depende de sus objetivos, el tamaño de la aplicación y cómo planea usar los resultados. Un porcentaje más pequeño (por ejemplo, 3 %) mantiene a más usuarios en la audiencia y puede ser adecuado para equipos que priorizan el alcance. Un porcentaje más grande (por ejemplo, 10 %) puede dar una mayor confianza estadística al comparar grupos. Puede establecer un valor Personalizado entre el 1 % y el 20 % para que se ajuste a sus necesidades.

¿Por qué mi grupo de control no tiene exactamente el porcentaje que establecí?

Anchor link to

El tamaño del grupo que se muestra en la página es el número real de usuarios que la fórmula de hash asignó al grupo, no el porcentaje multiplicado por su número de usuarios. En aplicaciones más pequeñas, este recuento puede diferir visiblemente del porcentaje, ya que la fórmula distribuye a los usuarios individualmente en lugar de muestrear una proporción exacta. El recuento se almacena en caché y se actualiza aproximadamente una vez al día; puede activar un recálculo inmediato desde la página, que muestra el recuento anterior con un indicador de carga mientras se ejecuta.

¿Qué significa Not enough data en la tabla de eventos?

Anchor link to

Not enough data significa que el grupo de tratamiento o el de control tuvieron menos de 10 conversiones o menos de 10 no conversiones para ese evento durante el período de tiempo seleccionado. Pushwoosh no puede determinar si la diferencia entre los grupos es estadísticamente significativa hasta que haya más datos disponibles.

¿Cómo se calcula el Uplift?

Anchor link to

El Uplift muestra la diferencia porcentual entre las tasas de conversión del tratamiento y del control, en relación con la tasa de control. Un valor positivo significa que el grupo de tratamiento convirtió mejor. Pushwoosh lo calcula como (conv. tratamiento − conv. control) / conv. control × 100 %.

¿Qué significa Conversions driven by messaging?

Anchor link to

Conversions driven by messaging es el número estimado de eventos adicionales generados por sus mensajes más allá del número esperado sin mensajes. Pushwoosh lo calcula como (eventos por usuario en tratamiento − eventos por usuario en control) × tamaño del grupo de tratamiento. El porcentaje muestra estos eventos adicionales como una proporción de todos los eventos del tratamiento.

¿Qué eventos puedo comparar y cuántos?

Anchor link to

Puede comparar los eventos configurados como Objetivos de Conversión en Customer Journey. Puede añadir hasta 10 eventos a la tabla de comparación. Los eventos de interacción con mensajes (por ejemplo, aperturas, clics, envíos, rebotes) se excluyen aunque se establezcan como objetivo, ya que los usuarios del grupo de control nunca reciben mensajes de marketing a los que reaccionar.