Контрольные группы

Контрольная группа исключает фиксированную долю ваших пользователей из маркетинговых сообщений в каналах Push, Email, In-App, SMS и WhatsApp. Pushwoosh сравнивает этих пользователей со всеми остальными в вашем приложении, кто продолжает получать кампании, чтобы вы могли измерить, приносят ли ваши сообщения результаты.

Пользователи контрольной группы по-прежнему получают транзакционные сообщения в этих каналах, если вы соответствующим образом установите тип сообщения.

Важно

• Контрольная группа настраивается для каждого приложения. У каждого приложения в вашем аккаунте есть своя контрольная группа со своим состоянием (включено/выключено), размером и составом участников. Создание или изменение ее в одном приложении не влияет на другие приложения.
• Только администраторы могут создавать, редактировать или удалять контрольную группу. Роли назначаются в Мой аккаунт → Пользователи и группы. Узнайте, как управлять ролями и разрешениями.

Как работает членство в контрольной группе

Pushwoosh не хранит список тех, кто находится в контрольной группе. Вместо этого при каждой проверке он объединяет ваше приложение, текущий номер версии группы и User ID, пропускает их через хэш-формулу для получения числа и проверяет, попадает ли это число в установленный вами процент (например, 5%). Если да, пользователь находится в контрольной группе. Если нет — не находится. Поскольку это формула, а не сохраненный список, включение группы сразу же применяется ко всей вашей существующей базе пользователей, а не только к тем, кто зарегистрируется позже.

Результат для каждого пользователя остается неизменным с течением времени: однажды назначенный, пользователь остается в контрольной группе или вне ее, пока вы не перемешаете группу, не измените ее размер или не изменится User ID пользователя. Поэтому, если вы отключите группу и снова включите ее позже, не перемешивая, вы получите точно такую же группу, как и раньше, поскольку сама формула не изменилась.

Важно

Pushwoosh назначает пользователей на основе их User ID, а не устройства. Если способы связи пользователя, такие как мобильное устройство, адрес электронной почты или номер телефона, не связаны под одним и тем же User ID, Pushwoosh рассматривает их как отдельных пользователей и вычисляет членство для каждого из них независимо. В результате один способ связи может быть исключен из маркетинговых сообщений, в то время как другой для того же человека все еще будет их получать.

Способы связи без User ID никогда не исключаются из маркетинговых сообщений (Push, Email, In-App, SMS, WhatsApp). Pushwoosh нужен User ID для запуска формулы членства.

Зарегистрируйте каждый способ связи для одного и того же человека под одним User ID, чтобы Pushwoosh применял одинаковый статус контрольной группы в каждом канале.

Узнайте, как управлять User ID для омниканальных кампаний

Как контрольная группа влияет на доставку сообщений

Членство в контрольной группе блокирует или разрешает сообщения в зависимости от типа сообщения, который вы устанавливаете для каждой отправки.

• Маркетинговое сообщение: блокируется для пользователей контрольной группы в каналах Push, Email, In-App, SMS и WhatsApp.

• Транзакционное сообщение: по-прежнему доставляется в этих каналах. Выберите Транзакционное сообщение при создании Customer Journey или отправке разового сообщения.

Выбирайте Маркетинговое сообщение или Транзакционное сообщение для каждой отправки в этих каналах. См. где установить тип сообщения.

Примечание

• Viber: участники контрольной группы никогда не получают сообщения Viber, даже транзакционные.
• Отсутствие типа сообщения в отправках через API: параметр message_type является необязательным. Если вы его опустите, Pushwoosh будет рассматривать отправку как Маркетинговое сообщение, а не транзакционное, поэтому пользователи контрольной группы будут исключены. Установите Транзакционное сообщение в кампании или message_type на транзакционное в API, чтобы охватить всех, включая контрольную группу.

Узнайте больше о маркетинговых и транзакционных сообщениях.

Создание контрольной группы

Создайте контрольную группу, чтобы начать исключать долю ваших пользователей из маркетинговых сообщений. У приложения может быть только одна. Кнопка Новая группа перестает отображаться, как только вы ее создадите.

1. Перейдите в Настройки > Контрольные группы.
2. Нажмите Новая группа.

3. Установите Размер контрольной группы: доля пользователей, исключаемых из маркетинговых сообщений, от 1% до 20%.

4. Нажмите Создать. Группа немедленно начнет исключать своих участников из маркетинговых сообщений.

Управление контрольной группой

Откройте Настройки > Контрольные группы и нажмите на строку группы, чтобы перейти на ее страницу, где применяются описанные ниже разделы.

Редактирование размера контрольной группы

Вы можете в любое время изменить размер контрольной группы на ее странице.

1. Нажмите Настройки контрольной группы в правом верхнем углу. Кнопка также показывает текущий процент группы, например Настройки контрольной группы: 10%.
2. Выберите новый процент:

• 3% (Максимальный охват): наименьшая группа исключения для чувствительных или высокоценных аудиторий.
• 5% (Рекомендуется для большинства приложений): оптимальное сочетание уверенности в измерениях и охвата пользователей.
• 10% (Высокая уверенность): большая контрольная группа для более четкого и надежного подтверждения ROI.
• Пользовательский (1%–20%): установите пользовательский размер контрольной группы для гибкого измерения.

3. Нажмите Применить, чтобы подтвердить изменения.

Важно

Изменение размера группы пересчитывает членство для всей вашей базы пользователей с учетом нового процента, а не только для новых пользователей. Увеличение группы добавляет пользователей для достижения нового, большего процента, не удаляя никого из уже находящихся в ней. Уменьшение группы удаляет ровно столько существующих участников, чтобы сократить группу до нового, меньшего процента. Это может повлиять на то, как вы сравниваете результаты с предыдущими кампаниями, поэтому изменяйте размер только при необходимости.

Пересчет размера группы

Размер контрольной группы показывает сохраненное число, которое Pushwoosh обновляет примерно раз в день. Сразу после изменения размера группы или когда в ваше приложение приходит много новых пользователей, это число может быть устаревшим.

Чтобы обновить его немедленно, нажмите Пересчитать рядом с размером группы.

Перемешивание контрольной группы

Перемешать контрольную группу выбирает новый случайный набор пользователей, сохраняя тот же процент. Все, кто в настоящее время находится в группе, покидают ее, и их место занимает другой набор пользователей. Используйте эту функцию, когда одни и те же люди долгое время не получали ваши маркетинговые сообщения.

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Перемешать контрольную группу.

3. Подтвердите действие в появившемся диалоговом окне.

Важно

Перемешивание изменяет, какие пользователи исключаются из маркетинга, и перезапускает окно измерения для аналитики контрольной группы: данные до перемешивания больше не отражают текущую группу и не включаются в последующие сравнения.

Экспорт пользователей контрольной группы

Pushwoosh не помечает тегами пользователей контрольной группы, поэтому экспорт с этой страницы — единственный способ получить список текущих участников.

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Экспортировать пользователей.
3. Когда экспорт завершится, нажмите Скачать CSV, чтобы сохранить файл.

Отключение контрольной группы

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Отключить контрольную группу.

Отключение немедленно прекращает исключение пользователей этой группой, и они снова начинают получать маркетинговые сообщения. Если вы снова включите ее позже, не перемешивая, Pushwoosh воспроизведет точно такую же группу, поскольку членство вычисляется по той же формуле. Чтобы получить другую группу после повторного включения, перемешайте ее.

Примечание

Если вы создавали сегменты, экспорты или автоматизации, которые ссылаются на устаревший тег PW_ControlGroup, обратите внимание, что Pushwoosh больше не создает и не обновляет его, даже для приложений, в которых контрольная группа оставалась включенной во время развертывания 25–26 августа 2026 года. Существующие значения тегов перестают отражать реальное членство, поэтому перестройте эти сегменты, экспорты или автоматизации, используя Экспорт пользователей. Когда вы отключаете группу, Pushwoosh также очищает оставшиеся значения тегов в фоновом режиме.

Удаление контрольной группы

Удаление контрольной группы навсегда удаляет ее и ее конфигурацию.

1. Нажмите меню с тремя точками в правом верхнем углу.
2. Выберите Удалить группу.
3. Подтвердите действие в появившемся диалоговом окне. Это действие необратимо.

Важно

Удаление контрольной группы оставляет приложение без нее: каждое маркетинговое сообщение будет отправляться всем пользователям, пока вы не создадите новую контрольную группу, и вы потеряете прошлые измерения удаленной группы.

Чтобы приостановить группу, не теряя ее настроек, отключите ее вместо удаления.

Анализ влияния контрольной группы

Страница каждой контрольной группы показывает, как ваши сообщения работают по сравнению с этой группой. На странице есть два блока: таблица сравнения событий вверху и Отчет о влиянии под ней. Оба сравнивают две группы пользователей по любому выбранному вами событию:

• Экспериментальная группа: все пользователи, которые не входят в контрольную группу. Они продолжают получать ваши маркетинговые сообщения (Push, Email, In-App, SMS, WhatsApp) как обычно.
• Контрольная группа: группа, которую вы настроили выше. Эти пользователи исключены из маркетинговых сообщений, поэтому любая разница в их поведении не зависит от ваших кампаний.

Примечание

• События в таблице: События взаимодействия с сообщениями, такие как открытия, клики, отправки или возвраты push-уведомлений или email, не отображаются в этой таблице, даже если вы установили одно из них как Цель конверсии. Пользователи контрольной группы никогда не получают маркетинговые сообщения, поэтому сравнение этих событий показало бы только, что сообщение было отправлено, а не то, чего оно достигло.
• После изменения размера или перемешивания: Окно измерения перезапускается после того, как вы измените размер или перемешаете группу. Прошлые данные больше не отражают текущий состав участников, поэтому они исключаются из последующих измерений.
• Кто учитывается: Обе группы формируются из всей базы пользователей вашего приложения. Pushwoosh не фильтрует ни одну из групп до пользователей с действительным push-токеном, подтвержденным email или другим доступным каналом. С момента развертывания 25–26 августа 2026 года экспериментальная и контрольная группы используют одну и ту же базовую когорту без отдельной фильтрации между ними. Сравнения до этой даты могут показать скачкообразное изменение в Конв. контр. группы и Приросте, которое не вызвано ничем в вашем приложении.

Сравнение событий

1. Выберите временной интервал: Последние 3 дня, Последние 7 дней или Последние 30 дней.
2. Просмотрите таблицу сравнения событий. Она автоматически показывает события, только если вы установили Цели конверсии в Customer Journey. В противном случае таблица изначально пуста.
3. Нажмите Добавить события для сравнения, чтобы добавить любое событие, которое вы хотите измерить. Всего можно добавить до 10 событий.

Таблица показывает следующие метрики для каждого события:

• Конв. эксп. группы: коэффициент конверсии в экспериментальной группе. Это доля уникальных пользователей, которые получили ваши маркетинговые сообщения (Push, Email, In-App, SMS, WhatsApp) и вызвали событие хотя бы один раз.
• Конв. контр. группы: коэффициент конверсии в контрольной группе. Это доля уникальных пользователей, которые были исключены из маркетинговых сообщений и все равно вызвали событие хотя бы один раз, без влияния сообщений.
• Прирост: процентная разница между коэффициентами конверсии экспериментальной и контрольной групп относительно коэффициента контрольной группы. Положительное значение означает, что экспериментальная группа конвертировалась лучше. Рассчитывается как (конв. эксп. группы − конв. контр. группы) / конв. контр. группы × 100%.
• Значимость: является ли разница статистически достоверной:
  • Значимо: прирост вряд ли является случайным.
  • Незначимо: разница пока не является статистически достоверной.
  • Недостаточно данных: в одной из групп менее 10 конверсий или менее 10 не-конверсий для этого события, поэтому значимость не может быть рассчитана.

Просмотр Отчета о влиянии

Используйте выпадающий список Просмотреть событие, чтобы выбрать событие из таблицы. Отчет о влиянии ниже показывает более подробную разбивку для этого события.

• Прирост (изменение по сравнению с контрольной группой): насколько коэффициент конверсии экспериментальной группы отличается от коэффициента конверсии контрольной группы. Это то же значение, что и в таблице событий.
• Конверсии, обусловленные сообщениями: оценочное количество дополнительных событий, сгенерированных вашими сообщениями сверх числа, ожидаемого без сообщений. Рассчитывается как (событий на пользователя в эксп. группе − событий на пользователя в контр. группе) × размер эксп. группы. Процент показывает эти дополнительные события как долю от всех событий в экспериментальной группе.
• Значимость: указывает, является ли измеренная разница статистически достоверной. Отчет показывает Значимо, Незначимо или Недостаточно данных, основываясь на:
  • Достоверность: насколько Pushwoosh уверен, что прирост отражает реальную разницу между экспериментальной и контрольной группами, а не случайность, показанная в процентах. Чем выше достоверность, тем убедительнее доказательства.
  • P-значение: показывает, какова вероятность наблюдать эту разницу случайно, если сообщения не имеют реального эффекта. Более низкое P-значение предоставляет более убедительные доказательства того, что разница не случайна.
• Z-показатель: показывает, насколько разошлись результаты ваших двух групп. Показатель, близкий к 0, означает, что разница может быть случайной. Чем дальше от 0, тем увереннее вы можете быть в том, что одна группа действительно лучше другой.
• Разбивка по группам: сравнивает Экспериментальную и Контрольную группы по Оценочному числу пользователей, Общему количеству событий, Событий на пользователя и Коэф. конверсии (уник.).

Часто задаваемые вопросы

Может ли у приложения быть более одной контрольной группы?

Нет. У приложения может быть только одна контрольная группа, которая автоматически применяется к каждой маркетинговой отправке. Невозможно направить конкретное сообщение на другую группу.

Могу ли я удалить контрольную группу?

Да, из меню с тремя точками на странице группы. Это действие необратимо и оставляет приложение без резервного варианта: маркетинговые сообщения будут отправляться всем, пока вы не создадите новую контрольную группу. Чтобы приостановить группу, не теряя ее, отключите ее вместо удаления.

Какие пользователи находятся в контрольной группе?

Pushwoosh не хранит список участников контрольной группы. Он использует формулу — вычисление, которое всегда дает один и тот же ответ для одних и тех же входных данных, основываясь на вашем приложении, User ID пользователя и текущих настройках группы. Это применяется ко всей вашей существующей базе пользователей в момент включения группы, а не только к новым регистрациям, и результат для конкретного пользователя остается неизменным каждый раз, пока вы не перемешаете группу или не измените ее размер.

Получают ли пользователи контрольной группы транзакционные сообщения?

Да. Транзакционные сообщения (например, сброс пароля, подтверждение заказа) доставляются всем пользователям, включая контрольную группу. Для пользователей контрольной группы блокируются только маркетинговые сообщения.

Где я могу установить тип сообщения: маркетинговое или транзакционное?

Вы выбираете его везде, где отправляете сообщения. Для каждого канала см. Где установить тип сообщения.

Что происходит с кампаниями, созданными до того, как я включил контрольную группу?

Кампании, созданные до включения контрольной группы, работают точно так же, как и новые: Pushwoosh проверяет тип сообщения кампании во время отправки, а не во время создания.

• Маркетинговое сообщение (или отсутствие типа сообщения, что может произойти с кампаниями, созданными через API): контрольная группа немедленно исключает этих пользователей.
• Транзакционное сообщение: пользователи контрольной группы продолжают получать его, как и раньше.

Отредактируйте кампанию и установите тип сообщения Транзакционное сообщение, если хотите, чтобы оно доходило до всех, включая контрольную группу.

Могу ли я изменить размер контрольной группы после ее включения?

Да. Откройте страницу группы из Настройки > Контрольные группы, нажмите Настройки контрольной группы, выберите новый процент (от 1% до 20%) и нажмите Применить. Pushwoosh пересчитывает членство для всей вашей базы пользователей с учетом нового процента: увеличение группы добавляет пользователей, не удаляя никого из уже находящихся в ней, а уменьшение освобождает некоторых существующих участников. Это может повлиять на сравнение с предыдущими кампаниями, поэтому изменяйте размер только при необходимости.

Что произойдет, если я отключу контрольную группу?

Pushwoosh перестает исключать пользователей, и все снова начинают получать маркетинговые сообщения. Если вы снова включите контрольную группу позже, не перемешивая ее, вы получите точно такую же группу, потому что членство вычисляется по той же формуле. Чтобы получить другую группу после повторного включения, перемешайте ее.

Что делает «Перемешать»?

Перемешать контрольную группу создает совершенно новую случайную выборку с тем же процентным соотношением, заменяя текущую контрольную группу другим набором пользователей. Эта опция доступна в меню с тремя точками на странице группы. Используйте ее, когда одни и те же пользователи долгое время были исключены из маркетинга, и вы хотите получить свежий охват для контрольной группы. Перемешивание также перезапускает окно измерения для аналитики контрольной группы.

Как мне увидеть, какие пользователи находятся в контрольной группе?

Pushwoosh не помечает тегами пользователей контрольной группы. Откройте страницу группы из Настройки > Контрольные группы, нажмите меню с тремя точками и выберите Экспортировать пользователей, чтобы загрузить CSV-файл с текущими участниками.

Почему пользователь в контрольной группе все еще может получать маркетинговые сообщения?

Pushwoosh вычисляет членство в контрольной группе по User ID. Если у одного и того же человека есть несколько способов связи (например, email, push-устройство), которые не связаны под одним User ID, Pushwoosh рассматривает их как разных пользователей и вычисляет членство для каждого отдельно: один может попасть в контрольную группу, а другой — нет. Способ связи без User ID никогда не исключается, так как Pushwoosh нужен User ID для вычисления членства. Чтобы избежать этого, зарегистрируйте все способы связи под одним и тем же User ID.

Какой процент для контрольной группы мне следует выбрать?

Правильный процент зависит от ваших целей, размера приложения и того, как вы планируете использовать результаты. Меньший процент (например, 3%) оставляет больше пользователей в аудитории и может подойти командам, которые отдают приоритет охвату. Больший процент (например, 10%) может дать большую статистическую уверенность при сравнении групп. Вы можете установить Пользовательское значение от 1% до 20% в соответствии с вашими потребностями.

Почему моя контрольная группа не соответствует точно установленному мной проценту?

Размер группы, отображаемый на странице, — это фактическое количество пользователей, которое хэш-формула назначила группе, а не процент, умноженный на количество ваших пользователей. В небольших приложениях это число может заметно отличаться от процента, так как формула распределяет пользователей индивидуально, а не отбирает точную долю. Количество кэшируется и обновляется примерно раз в день; вы можете запустить немедленный пересчет со страницы, который показывает предыдущее количество с индикатором загрузки во время выполнения.

Что означает Недостаточно данных в таблице событий?

Недостаточно данных означает, что в экспериментальной или контрольной группе было менее 10 конверсий или менее 10 не-конверсий для этого события в течение выбранного периода времени. Pushwoosh не может определить, является ли разница между группами статистически значимой, пока не будет доступно больше данных.

Как рассчитывается Прирост?

Прирост показывает процентную разницу между коэффициентами конверсии экспериментальной и контрольной групп относительно коэффициента контрольной группы. Положительное значение означает, что экспериментальная группа конвертировалась лучше. Pushwoosh рассчитывает его как (конв. эксп. группы − конв. контр. группы) / конв. контр. группы × 100%.

Что означает Конверсии, обусловленные сообщениями?

Конверсии, обусловленные сообщениями — это оценочное количество дополнительных событий, сгенерированных вашими сообщениями сверх числа, ожидаемого без сообщений. Pushwoosh рассчитывает его как (событий на пользователя в эксп. группе − событий на пользователя в контр. группе) × размер эксп. группы. Процент показывает эти дополнительные события как долю от всех событий в экспериментальной группе.

Какие события я могу сравнивать и сколько?

Вы можете сравнивать события, настроенные как Цели конверсии в Customer Journey. Вы можете добавить до 10 событий в таблицу сравнения. События взаимодействия с сообщениями (например, открытия, клики, отправки, возвраты) исключаются, даже если они установлены как цель, поскольку пользователи контрольной группы никогда не получают маркетинговые сообщения, на которые могли бы отреагировать.