Сама по себе реактивация редко дает «чистую» выручку: часть людей и так бы вернулась. Поэтому мерить надо не клики и не OR, а разницу между теми, кого вы тронули, и теми, кого не тронули.
Рабочая схема простая:
— делите базу на test и holdout, где holdout не получает цепочку;
— сравнивайте не только доход, но и возвраты в оплату, повторные сессии, отмены;
— окно оценки держите одинаковым для обеих групп, иначе эффект размоется;
— отдельно смотрите lag: часть пользователей покупает не сразу, а через 3–10 дней после касания.
Если сегмент маленький, не делайте вывод по одному письму. Считайте эффект на уровне всей цепочки и фиксируйте, сколько людей дошло до каждого шага. Иначе получите красивый CTR при нулевом влиянии на LTV.
Еще одна ловушка — смотреть только на оживших пользователей. Правильный вопрос: сколько дополнительной выручки и удержания принесла рассылка сверх естественного возврата.
Если у вас нет holdout, хотя бы ведите baseline по похожим сегментам без касания; без этого реанимация легко кажется успешной там, где она просто ускорила уже готовую покупку.
Retention & LTV Growth
@retentionltvgrowth
Реанимационные рассылки нельзя оценивать по открытию — считайте только инкремент
Этот пост опубликован в Telegram-канале Retention & LTV Growth. Подписаться можно по ссылке: @retentionltvgrowth.