Партнёрка поменяла атрибуцию посреди теста: метрики стали мусором

Партнёрка поменяла атрибуцию посреди теста: метрики стали мусором

Контекст: команда лила на оффер через партнёрку, считала EPC, CR и окупаемость по своей схеме. На середине теста сеть включила post-click атрибуцию, а в отчётах это подали как «уточнение логики».

Что сломалось:
— конверсии начали падать в одном кабинете и расти в другом, хотя крео и трафик не менялись
— окна атрибуции перестали совпадать, часть лидов ушла в «непонятно откуда»
— оптимизация шла по старым цифрам, поэтому баеры резали рабочие связки и докручивали мусор

Что нужно было сделать иначе:
— зафиксировать правила атрибуции до старта и не принимать их без паузы в тесте
— держать параллельный лог: клики, лиды, постбэки, сверка по времени
— останавливать оптимизацию, если сеть меняет метод учёта внутри сплита

Вывод: если атрибуция двигается во время теста, результат уже нельзя считать результатом — только следом за изменением.