Получить демо

Инструмент CRM4retail

Проверить акцию на части базы перед запуском

На всю базу уходит только то, что окупилось на тесте.

Настройка A/B-эксперимента в CRM4retail
Черновик A/B-эксперимента: аудитория и доли групп, варианты A и B, целевые и guardrail-метрики, длительность и MDE.
Михаил Климов — директор CRM4retail

Скидку обычно дают сразу всей базе и только потом считают, во что это обошлось. Мы сделали проверку на части базы: на всех уходит только та механика, которая окупилась в тесте.

Эксперимент собирается по выбранному маркетинговому списку: аудитория случайно делится на контрольную группу A и группу с изменением B, задаются целевые метрики, guardrail-показатели, длительность и минимально значимый эффект (MDE). Результат считается по чекам из 1С — с p-value и доверительным интервалом, а не «на глаз».

Михаил Климов директор CRM4retail

Возможности

Что умеет инструмент

Контрольная группа и группа с изменением

Аудитория из списка случайно делится на группу A (текущая механика) и B (проверяемое изменение) в заданной пропорции.

Метрики цели и метрики риска

Рядом с основной метрикой — например, средним чеком в категории — считаются возвраты товара и просадка маржи, чтобы рост не оказался дороже прибыли.

Срок теста и минимальный эффект

До запуска фиксируются срок теста и минимально значимый эффект — тест не останавливают в момент, когда цифра случайно понравилась.

Результат со статистикой

После завершения видно сравнение групп, p-value, доверительный интервал и решение по победителю.

Как это работает

Путь от данных из 1С до результата

  1. 1

    Берёте список

    Аудиторией эксперимента становится готовый маркетинговый список — например, «топ уходящих».

  2. 2

    Описываете варианты

    Вариант A — текущая механика, вариант B — изменение: новая выкладка, пробник, связка «товар + подарок» или другой текст.

  3. 3

    Задаёте метрики и срок

    Основная метрика, дополнительные, guardrail, сегменты, исключение аномальных чеков, длительность и MDE.

  4. 4

    Считаете результат

    Сравниваете группы по чекам и масштабируете победителя на всю базу.

Зачем это нужно

Ситуации, в которых инструмент окупается

Не переплачивать скидкой

Тест показывает минимальную выгоду, при которой покупатель всё ещё возвращается.

Выбрать канал

Одно и то же предложение в Telegram и SMS даёт разную отдачу и разную стоимость.

Проверить новый повод

Прежде чем менять регулярный сценарий, гипотеза проверяется на части базы.

Частые вопросы

Что спрашивают чаще всего

Какой размер базы нужен для теста?

Чем меньше база, тем дольше идёт тест. На сегменте в несколько сотен активных покупателей разница обычно видна за одну-две недели.

Как понять, что результат не случайность?

Группы формируются случайным распределением по одному списку, срок и минимально значимый эффект фиксируются до старта, а в результатах считаются p-value и доверительный интервал.

Можно ли тестировать не скидку, а текст?

Да, сравнивать можно любой элемент: повод, канал, время отправки, формулировку предложения.

Демо на ваших данных

Спланируем первый эксперимент

Возьмём вашу гипотезу про скидку и посчитаем, какой нужен сегмент и срок, чтобы результату можно было верить.

Покажем на данных из вашей 1С, кого вернуть и что распродать

Оставьте контакты — за 30 минут разберём остатки и базу клиентов, покажем, сколько денег можно вернуть.

Другие инструменты

Что работает с этим в связке