Контрольные группы

Контрольная группа исключает фиксированную долю ваших пользователей из маркетинговых сообщений в каналах Push, Email, In-App, SMS и WhatsApp. Pushwoosh сравнивает этих пользователей со всеми остальными в вашем приложении, которые продолжают получать кампании, чтобы вы могли измерить, приносят ли ваши сообщения результаты.

Пользователи контрольной группы по-прежнему получают транзакционные сообщения по этим каналам, если вы соответствующим образом установите тип сообщения.

Важно

• Контрольная группа настраивается для каждого приложения. У каждого приложения в вашем аккаунте есть своя контрольная группа со своим состоянием включения/выключения, размером и членством. Создание или изменение ее в одном приложении не влияет на другие приложения.
• Только администраторы могут создавать, редактировать или удалять контрольную группу. Роли назначаются в Мой аккаунт → Пользователи и группы. Узнайте, как управлять ролями и разрешениями.

Как работает членство в контрольной группе

Pushwoosh не хранит список тех, кто входит в контрольную группу. Вместо этого при каждой проверке он объединяет ваше приложение, текущий номер версии группы и User ID, пропускает их через хэш-формулу для получения числа и проверяет, попадает ли это число в установленный вами процент (например, 5%). Если да, пользователь находится в контрольной группе. Если нет, то нет. Поскольку это формула, а не сохраненный список, включение группы сразу же применяется ко всей вашей существующей базе пользователей, а не только к тем, кто зарегистрируется позже.

Результат для каждого пользователя со временем остается неизменным: после назначения пользователь остается в контрольной группе или вне ее, пока вы не переформируете группу, не измените ее размер или не изменится User ID пользователя. Поэтому, если вы отключите группу и снова включите ее позже без переформирования, вы получите точно ту же группу, что и раньше, поскольку сама формула не изменилась.

Важно

Pushwoosh назначает пользователей на основе их User ID, а не устройства. Если способы связи пользователя, такие как его мобильное устройство, адрес электронной почты или номер телефона, не связаны под одним и тем же User ID, Pushwoosh рассматривает их как отдельных пользователей и вычисляет членство для каждого из них независимо. В результате один способ связи может быть исключен из маркетинговых сообщений, в то время как другой для того же человека все еще будет их получать.

Способы связи без User ID никогда не исключаются из маркетинговых сообщений (Push, Email, In-App, SMS, WhatsApp). Pushwoosh нужен User ID для запуска формулы членства.

Зарегистрируйте каждый способ связи для одного и того же человека под одним User ID, чтобы Pushwoosh применял одинаковый статус контрольной группы на каждом канале.

Узнайте, как управлять User ID для омниканальных кампаний

Как контрольная группа влияет на доставку сообщений

Членство в контрольной группе блокирует или разрешает сообщения в зависимости от типа сообщения, который вы устанавливаете для каждой отправки.

• Маркетинговое сообщение: блокируется для пользователей контрольной группы в каналах Push, Email, In-App, SMS и WhatsApp.

• Транзакционное сообщение: по-прежнему доставляется по этим каналам. Выберите Транзакционное сообщение при создании Customer Journey или отправке разового сообщения.

Выберите Маркетинговое сообщение или Транзакционное сообщение для каждой отправки по этим каналам. См. где задать тип сообщения.

Примечание

• Viber: участники контрольной группы никогда не получают сообщения Viber, даже транзакционные.
• Отсутствие типа сообщения в отправках через API: параметр message_type является необязательным. Если вы его опустите, Pushwoosh будет рассматривать отправку как Маркетинговое сообщение, а не транзакционное, поэтому пользователи контрольной группы будут исключены. Установите Транзакционное сообщение в кампании или message_type на транзакционное в API, чтобы охватить всех, включая контрольную группу.

Узнайте больше о маркетинговых и транзакционных сообщениях.

Создание контрольной группы

Создайте контрольную группу, чтобы начать исключать часть ваших пользователей из маркетинговых сообщений. Control Panel создает одну группу для каждого приложения. Кнопка Новая группа перестает отображаться, как только у вас появится группа.

1. Перейдите в Настройки > Контрольные группы.
2. Нажмите Новая группа.

3. Установите Размер контрольной группы: доля пользователей, исключаемых из маркетинговых сообщений, от 1% до 20%.

4. Нажмите Создать. Группа немедленно начнет исключать своих участников из маркетинговых сообщений.

Управление контрольной группой

Откройте Настройки > Контрольные группы и щелкните по строке группы, чтобы перейти на ее собственную страницу, где применяются разделы ниже.

Редактирование размера и стран контрольной группы

Вы можете в любое время настроить размер контрольной группы и страны, которые она исключает, на ее странице.

1. Нажмите Настройки контрольной группы в правом верхнем углу. Кнопка также показывает текущий процент группы, например Настройки контрольной группы: 10%.
2. Выберите новый процент:

• 3% (Максимальный охват): наименьшая группа исключения для чувствительных или высокоценных аудиторий.
• 5% (Рекомендуется для большинства приложений): оптимизированное сочетание уверенности в измерениях и охвата пользователей.
• 10% (Более высокая уверенность): большая контрольная группа для более четкой и надежной проверки ROI.
• Пользовательский (1%–20%): установите пользовательский размер контрольной группы для гибкого измерения.

3. В поле Страны выберите одну или несколько стран, чтобы ограничить контрольную группу, или оставьте его пустым, чтобы исключать пользователей из всей вашей аудитории.
4. Нажмите Применить, чтобы подтвердить изменения.

Важно

Изменение размера группы пересчитывает членство для всей вашей базы пользователей с учетом нового процента, а не только для новых пользователей. Увеличение группы добавляет пользователей для достижения нового, большего процента, не удаляя никого из уже находящихся в ней. Уменьшение группы удаляет ровно столько существующих участников, чтобы довести группу до нового, меньшего процента. Это может повлиять на то, как вы сравниваете результаты с предыдущими кампаниями, поэтому изменяйте размер только при необходимости.

Изменение Стран перезапускает измерение прироста, потому что сравниваемая аудитория становится другой. Сама контрольная группа не переназначается: членство пользователей по-прежнему следует той же формуле, меняется только то, какие из устройств этих пользователей исключаются из маркетинга.

Ограничение контрольной группы по странам

Ограничение по стране — это вторая проверка для каждого устройства в дополнение к членству в контрольной группе. Установите его в том же диалоговом окне Настройки контрольной группы, описанном в разделе Редактирование размера и стран контрольной группы.

• Пустое поле «Страны»: каждый пользователь, выбранный процентной формулой, исключается, независимо от местоположения.
• Непустое поле «Страны»: исключаются только устройства, у которых системный тег Страна совпадает с одной из выбранных стран. Устройство за пределами выбранных стран продолжает получать маркетинговые сообщения, даже если его пользователь был выбран процентной формулой.

Примечание

• Нет тега «Страна» — нет исключения. Устройство без системного тега Страна никогда не исключается из маркетинговых сообщений, даже если его пользователь выбран и установлены Страны. Pushwoosh нужен тег, чтобы проверить его на соответствие области действия.
• Ограничение по устройству, а не по пользователю. У человека с устройствами в разных странах некоторые могут быть исключены, а другие — нет. Например, если в Странах установлен Азербайджан: устройство пользователя в Азербайджане будет исключено, а его устройство в Казахстане продолжит получать маркетинговые сообщения.

Пересчет размера группы

Размер контрольной группы показывает сохраненное число, которое Pushwoosh обновляет примерно раз в день. Сразу после изменения размера группы или когда в ваше приложение приходит много новых пользователей, это число может быть устаревшим.

Чтобы обновить его немедленно, нажмите Пересчитать рядом с размером группы.

Переформирование контрольной группы

Переформировать контрольную группу выбирает новый случайный набор пользователей, сохраняя тот же процент. Все, кто в настоящее время находится в группе, покидают ее, и их место занимает другой набор пользователей. Используйте эту функцию, когда одни и те же люди долгое время были исключены из ваших маркетинговых сообщений.

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Переформировать контрольную группу.

3. Подтвердите в появившемся диалоговом окне.

Важно

Переформирование меняет, какие пользователи исключаются из маркетинга, и перезапускает окно измерения для аналитики контрольной группы: данные до переформирования больше не отражают текущую группу и не включаются в последующие сравнения.

Экспорт пользователей контрольной группы

Pushwoosh не присваивает теги пользователям контрольной группы. Экспортируйте с этой страницы для получения разового списка или вызовите CheckControlGroupMembership для программной проверки пакета User ID.

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Экспортировать пользователей.
3. Когда экспорт завершится, нажмите Скачать CSV, чтобы сохранить файл.

Отключение контрольной группы

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Отключить контрольную группу.

Отключение немедленно прекращает исключение пользователей этой группой, и они снова начинают получать маркетинговые сообщения. Если вы снова включите ее позже без переформирования, Pushwoosh воспроизведет точно ту же группу, поскольку членство вычисляется по той же формуле. Чтобы получить другую группу после повторного включения, переформируйте ее.

Примечание

Если вы создавали сегменты, экспорты или автоматизации, которые ссылаются на устаревший тег PW_ControlGroup, обратите внимание, что Pushwoosh больше не создает и не обновляет его, даже для приложений, которые сохранили контрольную группу включенной во время развертывания 25–26 августа 2026 года. Существующие значения тегов перестают отражать реальное членство, поэтому перестройте эти сегменты, экспорты или автоматизации, используя Экспорт пользователей. Когда вы отключаете группу, Pushwoosh также очищает оставшиеся значения тегов в фоновом режиме.

Удаление контрольной группы

Удаление контрольной группы навсегда удаляет ее и ее конфигурацию.

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Удалить группу.
3. Подтвердите в появившемся диалоговом окне. Это действие необратимо.

Важно

Удаление контрольной группы оставляет приложение без нее: каждое маркетинговое сообщение будет отправляться всем пользователям, пока вы не создадите новую контрольную группу, и вы потеряете прошлые измерения удаленной группы.

Чтобы приостановить группу, не теряя ее настроек, отключите ее вместо удаления.

Анализ влияния контрольной группы

На странице каждой контрольной группы показано, как ваши сообщения работают по сравнению с этой группой. Страница состоит из двух блоков: таблицы сравнения событий вверху и отчета о влиянии (Impact report) под ней. Оба сравнивают две группы пользователей по любому выбранному вами событию:

• Основная группа (Treatment group): все пользователи, которые не входят в контрольную группу. Они продолжают получать ваши маркетинговые сообщения (Push, Email, In-App, SMS, WhatsApp) как обычно.
• Контрольная группа: группа, которую вы настроили выше. Эти пользователи исключены из маркетинговых сообщений, поэтому любое различие в их поведении не зависит от ваших кампаний.

Примечание

• События в таблице: События взаимодействия с сообщениями, такие как открытия, клики, отправки или возвраты push-уведомлений или email, не отображаются в этой таблице, даже если вы установили одно из них в качестве цели конверсии. Пользователи контрольной группы никогда не получают маркетинговые сообщения, поэтому сравнение этих событий показало бы только, что сообщение было отправлено, а не то, чего оно достигло.
• После изменения размера, области действия или переформирования: Окно измерения перезапускается после того, как вы измените размер или страны или переформируете группу. Прошлые данные больше не отражают текущее членство или аудиторию, поэтому они исключаются из последующих измерений.
• Кто учитывается: Обе группы выбираются из всей базы пользователей вашего приложения. Pushwoosh не фильтрует ни одну из групп до пользователей с действительным push-токеном, подтвержденным email или другим доступным каналом. С момента развертывания 25–26 августа 2026 года основная и контрольная группы используют одну и ту же базовую когорту без отдельной фильтрации между ними. Сравнения до этой даты могут показать скачкообразное изменение в Конв. в контрольной группе и Приросте (Uplift), которое не вызвано ничем в вашем приложении.

Сравнение событий

1. Выберите временной промежуток: Последние 3 дня, Последние 7 дней или Последние 30 дней.
2. Просмотрите таблицу сравнения событий. Она показывает события автоматически, только если вы установили цели конверсии в Customer Journey. В противном случае таблица изначально пуста.
3. Нажмите Добавить события для сравнения, чтобы добавить любое событие, которое вы хотите измерить. Вы можете добавить до 10 событий в общей сложности.

Таблица показывает следующие метрики для каждого события:

• Конв. в основной группе: коэффициент конверсии в основной группе. Это доля уникальных пользователей, которые получили ваши маркетинговые сообщения (Push, Email, In-App, SMS, WhatsApp) и вызвали событие хотя бы один раз.
• Конв. в контрольной группе: коэффициент конверсии в контрольной группе. Это доля уникальных пользователей, которые были исключены из маркетинговых сообщений и все равно вызвали событие хотя бы один раз, без влияния сообщений.
• Прирост (Uplift): процентная разница между коэффициентами конверсии основной и контрольной групп относительно коэффициента контрольной группы. Положительное значение означает, что основная группа конвертировалась лучше. Рассчитывается как (конв. в основной группе − конв. в контрольной группе) / конв. в контрольной группе × 100%.
• Значимость: является ли разница статистически надежной:
  • Значимо: прирост вряд ли является случайным.
  • Незначимо: разница пока не является статистически надежной.
  • Недостаточно данных: в любой из групп менее 10 конверсий или менее 10 не-конверсий для этого события, поэтому значимость не может быть рассчитана.

Просмотр отчета о влиянии (Impact report)

Используйте выпадающий список Просмотреть событие, чтобы выбрать событие из таблицы. Отчет о влиянии (Impact report) ниже показывает более подробную разбивку для этого события.

• Прирост (Uplift) (изменение по сравнению с контрольной группой): насколько коэффициент конверсии основной группы отличается от коэффициента конверсии контрольной группы. Это то же значение, что и в таблице событий.
• Конверсии, обусловленные сообщениями: оценочное количество дополнительных событий, сгенерированных вашими сообщениями сверх ожидаемого количества без сообщений. Рассчитывается как (событий на пользователя в основной группе − событий на пользователя в контрольной группе) × размер основной группы. Процент показывает эти дополнительные события как долю всех событий основной группы.
• Значимость: указывает, является ли измеренная разница статистически надежной. Отчет показывает Значимо, Незначимо или Недостаточно данных, на основе:
  • Доверительный уровень: насколько Pushwoosh уверен, что прирост отражает реальную разницу между основной и контрольной группами, а не случайность, показан в процентах. Чем выше доверительный уровень, тем сильнее доказательства.
  • P-значение: показывает, какова вероятность наблюдать эту разницу случайно, если сообщения не имеют реального эффекта. Более низкое P-значение предоставляет более сильные доказательства того, что разница не случайна.
• Z-оценка: показывает, насколько далеко друг от друга находятся результаты ваших двух групп. Оценка, близкая к 0, означает, что разница может быть случайной. Чем дальше от 0, тем увереннее вы можете быть в том, что одна группа действительно лучше другой.
• Разбивка по группам: сравнивает основную и контрольную группы по Оценочному количеству пользователей, Общему количеству событий, Событиям на пользователя и Коэффициенту конверсии (уникальные).

Часто задаваемые вопросы

Может ли в приложении быть несколько контрольных групп?

В Control Panel — нет. Для каждого приложения создается одна контрольная группа, которая автоматически применяется к каждой маркетинговой рассылке. Это ограничение интерфейса, а не платформы. Панель не предоставляет способа направить конкретное сообщение на другую группу.

Можно ли удалить контрольную группу?

Да, из меню с тремя точками на странице группы. Это действие необратимо, и приложение останется без запасного варианта: маркетинговые сообщения будут отправляться всем, пока вы не создадите новую контрольную группу. Чтобы приостановить группу, не теряя ее, отключите ее вместо удаления.

Какие пользователи входят в контрольную группу?

Pushwoosh не хранит список участников контрольной группы. Он использует формулу — вычисление, которое всегда дает одинаковый ответ при одинаковых входных данных, основанных на вашем приложении, User ID пользователя и текущих настройках группы. Это применяется ко всей вашей существующей базе пользователей в момент включения группы, а не только к новым регистрациям, и результат для данного пользователя каждый раз остается прежним, пока вы не переформируете группу или не измените ее размер.

Получают ли пользователи контрольной группы транзакционные сообщения?

Да. Транзакционные сообщения (например, сброс пароля, подтверждение заказа) доставляются всем пользователям, включая контрольную группу. Блокируются только маркетинговые сообщения для пользователей контрольной группы.

Где задается тип сообщения: маркетинговое или транзакционное?

Вы выбираете его везде, где отправляете сообщения. Для каждого канала см. Где задать тип сообщения.

Что происходит с кампаниями, созданными до включения контрольной группы?

Кампании, созданные до включения контрольной группы, работают точно так же, как и новые: Pushwoosh проверяет тип сообщения кампании во время отправки, а не во время создания.

• Маркетинговое сообщение (или отсутствие типа сообщения, что может произойти для кампаний, созданных через API): контрольная группа немедленно начинает исключать этих пользователей.
• Транзакционное сообщение: пользователи контрольной группы продолжают получать его, как и раньше.

Отредактируйте кампанию и установите тип сообщения Транзакционное сообщение, если вы хотите, чтобы оно доходило до всех, включая контрольную группу.

Можно ли изменить размер контрольной группы после ее включения?

Да. Откройте страницу группы из Настройки > Контрольные группы, нажмите Настройки контрольной группы, выберите новый процент (от 1% до 20%) и нажмите Применить. Pushwoosh пересчитывает членство для всей вашей базы пользователей с учетом нового процента: увеличение группы добавляет пользователей, не удаляя никого из уже находящихся в ней, а уменьшение освобождает некоторых существующих участников. Это может повлиять на сравнение с предыдущими кампаниями, поэтому изменяйте размер только при необходимости.

Можно ли ограничить контрольную группу определенными странами?

Да. Откройте страницу группы из Настройки > Контрольные группы, нажмите Настройки контрольной группы и установите Страны. Оставьте поле пустым, чтобы исключать пользователей из всей вашей аудитории, или выберите одну или несколько стран, чтобы исключать только устройства в этих странах. Ограничение по стране — это проверка для каждого устройства в дополнение к процентной формуле: она не меняет, кого выбирает формула, а только то, какие из их устройств будут исключены из маркетинга. Изменение Стран перезапускает измерение прироста, так как сравниваемая аудитория меняется.

Что происходит с устройством без данных о стране?

Оно никогда не исключается, даже если установлены Страны и его пользователь выбран в остальном. Pushwoosh проверяет системный тег Страна устройства на соответствие области действия, и у устройства без этого тега нечего проверять, поэтому оно продолжает получать маркетинговые сообщения.

Что произойдет, если я отключу контрольную группу?

Pushwoosh перестает исключать пользователей, и все снова начинают получать маркетинговые сообщения. Если вы снова включите контрольную группу позже, не переформировывая ее, вы получите точно ту же группу, потому что членство вычисляется по той же формуле. Чтобы получить другую группу после повторного включения, переформируйте ее.

Что делает функция «Переформировать» (Reshuffle)?

Переформировать контрольную группу создает совершенно новую случайную выборку с тем же процентом, заменяя текущую контрольную группу другим набором пользователей. Она доступна из меню с тремя точками на странице группы. Используйте ее, когда одни и те же пользователи были исключены из маркетинга в течение длительного времени, и вы хотите получить свежий охват контрольной группы. Переформирование также перезапускает окно измерения для аналитики контрольной группы.

Как посмотреть, какие пользователи находятся в контрольной группе?

Pushwoosh не присваивает теги пользователям контрольной группы. Откройте страницу группы из Настройки > Контрольные группы, нажмите меню с тремя точками и выберите Экспортировать пользователей, чтобы загрузить CSV-файл с текущими участниками. Чтобы проверить членство программно, вызовите CheckControlGroupMembership с пакетом User ID.

Почему пользователь из контрольной группы все равно может получать маркетинговые сообщения?

Pushwoosh определяет членство в контрольной группе по User ID. Если у одного и того же человека есть несколько способов связи (например, email, push-устройство), которые не связаны под одним User ID, Pushwoosh рассматривает их как разных пользователей и вычисляет членство для каждого отдельно: один может попасть в контрольную группу, а другой — нет. Способ связи без User ID никогда не исключается, так как Pushwoosh нужен User ID для вычисления членства. Чтобы избежать этого, зарегистрируйте все способы связи с одним и тем же User ID.

Какой процент для контрольной группы выбрать?

Правильный процент зависит от ваших целей, размера приложения и того, как вы планируете использовать результаты. Меньший процент (например, 3%) оставляет больше пользователей в аудитории и может подойти командам, которые отдают приоритет охвату. Больший процент (например, 10%) может дать более высокую статистическую достоверность при сравнении групп. Вы можете установить Пользовательское значение от 1% до 20% в соответствии с вашими потребностями.

Почему моя контрольная группа не соответствует точно установленному проценту?

Размер группы, отображаемый на странице, — это фактическое количество пользователей, которое хэш-формула присвоила группе, а не процент, умноженный на количество ваших пользователей. В небольших приложениях это число может заметно отличаться от процента, так как формула распределяет пользователей индивидуально, а не выбирает точную долю. Количество кэшируется и обновляется примерно раз в день; вы можете запустить немедленный пересчет со страницы, который показывает предыдущее количество с индикатором загрузки во время выполнения.

Что означает «Недостаточно данных» в таблице событий?

Недостаточно данных означает, что в основной или контрольной группе было менее 10 конверсий или менее 10 не-конверсий для этого события в течение выбранного периода времени. Pushwoosh не может определить, является ли разница между группами статистически значимой, пока не будет доступно больше данных.

Как рассчитывается «Прирост (Uplift)»?

Прирост (Uplift) показывает процентную разницу между коэффициентами конверсии основной и контрольной групп относительно коэффициента контрольной группы. Положительное значение означает, что основная группа конвертировалась лучше. Pushwoosh рассчитывает его как (конв. в основной группе − конв. в контрольной группе) / конв. в контрольной группе × 100%.

Что означает «Конверсии, обусловленные сообщениями»?

Конверсии, обусловленные сообщениями — это оценочное количество дополнительных событий, сгенерированных вашими сообщениями сверх ожидаемого количества без сообщений. Pushwoosh рассчитывает его как (событий на пользователя в основной группе − событий на пользователя в контрольной группе) × размер основной группы. Процент показывает эти дополнительные события как долю всех событий основной группы.

Какие события я могу сравнивать и сколько?

Вы можете сравнивать события, настроенные как цели конверсии в Customer Journey. Вы можете добавить до 10 событий в таблицу сравнения. События взаимодействия с сообщениями (например, открытия, клики, отправки, возвраты) исключаются, даже если они установлены в качестве цели, поскольку пользователи контрольной группы никогда не получают маркетинговые сообщения, на которые могли бы отреагировать.