Главная / Практикум / Маркетинговые эксперименты: контрольная группа и прибыль
Лаборатория роста
Проверяйте идеи на своих данных
Спланируйте небольшой эксперимент и сравните результат с контрольной группой. Здесь нет придуманных историй успеха: все примеры учебные, реальные результаты вводите вы.
Методика сравнения
Разница долей покупателей показана с приближённым 95% интервалом Newcombe на основе интервалов Wilson для двух независимых групп. Он не заменяет проверку случайного назначения, завершённого окна и качества данных. Для прибыли интервал не рассчитывается. Первичная публикация методики, 1998.
Восемь практических руководств
Как собрать контрольную группу для акции
Контрольная группа показывает, что происходило бы с похожими клиентами без нового предложения. Она нужна, чтобы не приписать акции естественные покупки.
Открыть руководство →Как проверить предложение для второго визита
Проверяйте, появляется ли дополнительный второй визит и остаётся ли прибыль после поощрения. Само использование купона ещё не доказывает прирост.
Открыть руководство →Как сравнить подарок и скидку без ошибки в прибыли
У подарка и скидки разная стоимость для бизнеса. Сравнивайте прибыль на участника, а не номинал бонуса и не количество активаций.
Открыть руководство →Как проверить возврат давно не бывших клиентов
Порог «давно не был» зависит от привычной частоты покупки. Месяц для одного бизнеса — большой перерыв, для другого — обычный цикл.
Открыть руководство →Как проверить, где лучше работает QR-код регистрации
Разные места размещения удобно различать отдельными ссылками. Но количество переходов по QR-коду и количество зарегистрированных клиентов — разные показатели.
Открыть руководство →Как сравнить два текста сообщения клиенту
Проверка формулировки полезна, когда аудитория, предложение и условия отправки одинаковы. Иначе результат нельзя уверенно связать именно с текстом.
Открыть руководство →Как проверить, помогает ли обучение команды
Обучение может улучшить объяснение условий и регистрацию, но результат зависит от смены, нагрузки и исходного опыта. Измеряйте поведение сотрудников и путь клиента.
Открыть руководство →Как составить честный отчёт по маркетинговому тесту
В хорошем отчёте видно не только число покупок, но и сравнение, расходы, качество данных и пределы вывода. Тогда решение можно повторить и проверить.
Открыть руководство →
До запуска
- Гипотеза и основной показатель
- Участники, исключения и назначение групп
- Срок, бюджет, источник данных
Во время теста
- Одинаковый учёт для обеих групп
- Не переносить участников после результата
- Записывать сбои и изменения условий
После теста
- Сравнить результат на участника
- Учесть расходы и неопределённость
- Принять решение и сохранить журнал
