Инкрементальность: как отделить реальный вклад платного трафика от статистического шума

Инкрементальность: как отделить реальный вклад платного трафика от статистического шума

Если канал оптимизируется по атрибуции, он часто получает кредит за продажи, которые случились бы и без него. Инкрементальность отвечает на другой вопрос: сколько дополнительных заказов дал именно платный трафик. Формально: incremental lift = (конверсия теста − конверсия контроля) / конверсия контроля.

Рабочая схема измерения проста:
— делим аудиторию, географию или время на test/control;
— в контроле отключаем показы или сильно режем охват;
— фиксируем одинаковые окна измерения и один KPI: выручка, маржа, заказы;
— считаем не только uplift, но и доверительный интервал. Если разброс перекрывает ноль, выводов нет.

Главная ошибка — смотреть только last click. Математика аукциона беспощадна: система всегда найдет путь присвоить себе то, что уже было бы конвертировано органикой, брендом или возвратным спросом. Поэтому оценивайте не CTR и не CPA, а инкрементальную маржу после вычета медиа и операционных затрат. Тогда видно, где реклама создает спрос, а где просто перехватывает его 🧮

Если нет возможности построить полноценный эксперимент, используйте суррогаты: holdout на части базы, geo-split, периодическое выключение сегмента. Но интерпретируйте осторожно: сезонность, акции и price elasticity легко маскируют эффект. Разбираем механику окупаемости только там, где есть контрольная группа и чистая метрика.

Итог простой: платный трафик полезен не потому, что он атрибутировался, а потому, что он дал прирост сверх базового спроса. Считаем инкрементальность — иначе оптимизация идет не по ROI, а по иллюзии.