Инкрементальность email-рассылок интернет-магазина: как измерить реальный вклад

Интернет-магазин отправляет email-рассылку, видит 400 000 рублей выручки в отчёте — и считает, что кампания сработала. Но часть этих заказов покупатели сделали бы и без письма. Инкрементальность показывает, сколько денег рассылка принесла действительно: это разница между тем, что произошло, и тем, что произошло бы без отправки. Без такой оценки невозможно понять, окупается ли email-рассылка для интернет-магазина или просто «присваивает» чужие продажи.

Что такое инкрементальность email-рассылок

Инкрементальность (от англ. incremental — «дополнительный, приростный») — это эффект, который возникает именно из-за вашей коммуникации. Простыми словами: это разница между реальной выручкой после рассылки и той выручкой, которая была бы у магазина, если бы письмо не отправили. Всё, что попадает в эту разницу, — настоящий вклад email-маркетинга.

Для интернет-магазина вопрос звучит так: заказ пришёл благодаря письму или покупатель просто «дозрел» сам, а рассылка совпала по времени? Ответ на него определяет, стоит ли увеличивать частоту отправок, расширять базу или, наоборот, сокращать объёмы.

Если вы не измеряете инкрементальность, вы не управляете email-каналом — вы управляете отчётом о нём.

Почему обычные метрики завышают результат

Классические показатели email-маркетинга измеряют активность, а не причинность. Они показывают, что произошло после отправки, но не отвечают на вопрос, произошло бы это без неё.

Открытия и клики

Open rate давно искажён превью-сканерами Apple и корпоративных фильтров, а CTR говорит лишь о любопытстве, а не о деньгах. Высокий CTR при нулевом приросте заказов — частое явление в промо-письмах со скидкой, которые открывают, но не покупают.

Атрибуция по последнему клику

Если покупатель получил письмо, потом зашёл из поиска и оформил заказ, аналитика почти всегда отдаст продажу email или наоборот — поиску. В реальности вклад распределён между касаниями, и без эксперимента его не разделить.

Сезонность, промо и «естественный» спрос

Во время распродажи, перед праздниками или после запуска рекламы магазин продаёт много даже без писем. Именно в такие периоды рассылки выглядят особенно эффективными, хотя значительная часть заказов пришла бы и так.

Четыре метода измерения инкрементальности

1. Holdout-тест — золотой стандарт

Вы случайно делите базу на две группы: тестовую и контрольную (holdout). Первая получает письмо, вторая — нет, но продолжает жить обычной жизнью магазина. Разница в поведении групп и есть инкрементальный эффект.

• Размер holdout: обычно 5–10% базы, для небольших списков — до 20%.
• Срок наблюдения: минимум 3–7 дней, чтобы захватить отложенные покупки.
• Важно: контроль не должен получать ту же кампанию ни в каком виде.

2. Тест «до и после»

Сравнение выручки за период до рассылки и после. Метод простой, но ломается о сезонность, выходные и параллельные акции. Его стоит использовать только как грубую проверку гипотез.

3. Гео- или сегментный сплит

Если holdout невозможен (маленькая база, критичная кампания), сравните регионы или похожие сегменты: один получает рассылку, другой — нет. Требование то же: группы должны быть сопоставимы по размеру, истории покупок и активности.

4. iROI — инкрементальный ROI

Это ключевая метрика: сколько дополнительной прибыли приносит каждый рубль, вложенный в рассылку. Считается от инкрементальной выручки, а не от общей.

Сколько данных нужно для достоверного теста

Чем меньше ожидаемый эффект, тем больше нужна выборка: для прироста в 5% обычно требуются десятки тысяч получателей, для прироста в 40% хватит и нескольких тысяч. Если база маленькая, тестируйте не отдельную кампанию, а весь поток писем за месяц или объединяйте похожие сегменты.

Смотрите не только на выручку, но и на промежуточные показатели: число заказов на получателя, средний чек, долю отписок. Иногда инкрементальный прирост есть, но он «съедается» ростом отписок и жалоб на спам.

Пошаговый план holdout-теста

1. Сформулируйте гипотезу: например, «третья отправка в неделю даёт прирост, а не каннибализацию».
2. Выберите период без крупных распродаж — иначе эффект исказится.
3. Случайно отберите контрольную группу и зафиксируйте её состав до отправки.
4. Проверьте, что контроль не попадёт в другие версии той же кампании.
5. Отправьте письмо тестовой группе и не меняйте креативы в процессе.
6. Подождите окно атрибуции (3–7 дней) и только потом считайте результат.
7. Сравните выручку и число заказов на сопоставимый размер группы.
8. Зафиксируйте вывод и переходите к следующей гипотезе.

Как считать результат: пример

Магазин отправляет 100 000 писем. 10 000 адресов — holdout. За три дня тестовая группа принесла 400 000 ₽, контрольная — 25 000 ₽.

• Приводим контроль к масштабу теста: 25 000 ₽ × 10 = 250 000 ₽.
• Инкрементальная выручка: 400 000 − 250 000 = 150 000 ₽.
• Допустим, затраты на кампанию (платформа, продакшн, скидки) — 40 000 ₽.
• iROI = (150 000 − 40 000) / 40 000 = 2,75, то есть 275%.

Без поправки на контроль кампания выглядела бы на 150 000 ₽ выгоднее, чем есть на самом деле. Именно эта цифра — реальный вклад email-рассылки для интернет-магазина.

Что делать с результатами

• Оставить частоту отправок, если iROI положительный, и аккуратно масштабировать объём.
• Сократить сегмент или периодичность, если прирост нулевой либо отрицательный.
• Проверить, не каннибализируют ли рассылки друг друга: частая причина нулевой инкрементальности.
• Переносить бюджет в каналы с доказанным приростом, а не с красивым CTR.
• Разделять кампании по типам: триггерные письма обычно дают более высокий iROI, чем массовые промо.

Частые ошибки

• Слишком маленький holdout — разница тонет в случайных колебаниях.
• Слишком короткое окно наблюдения: заказы «догоняют» через неделю.
• Контрольная группа получает то же письмо через другой канал или сегмент.
• Запуск теста на фоне распродажи или крупной рекламной кампании.
• Оценка результата по открытиям вместо выручки и прибыли.
• Единичный тест вместо регулярного цикла проверки гипотез.

Вывод

Инкрементальность превращает email-маркетинг из «канала, который что-то приносит» в управляемый источник прибыли. Достаточно одного holdout-теста в квартал, чтобы понять реальную ценность рассылок и перестать спорить о цифрах в отчёте. Чем раньше вы начнёте измерять прирост, тем быстрее найдёте тот формат email-рассылки для интернет-магазина, который действительно увеличивает продажи.

Дисклеймер: приведённые формулы и числовые примеры носят иллюстративный характер. Финансовые показатели зависят от маржинальности, среднего чека и структуры базы вашего магазина, поэтому решения стоит принимать на основе собственных данных, при необходимости — с участием аналитика.