A/B тесты в трекере ломаются не на креативах, а на кривом старте

A/B тесты в трекере ломаются не на креативах, а на кривом старте

Первый проваленный тест обычно выглядит как «оба варианта почти равны», хотя на деле сравнение было нечестным. Чаще всего мешают три вещи: разные источники трафика в группах, ручные правки параметров уже после запуска и дубли событий, которые раздувают конверсии.

Перед стартом проверь базу: — одинаковые правила раздачи трафика; — один и тот же оффер, лендинг и окно атрибуции; — отключены лишние постбеки, пиксели и ретраи. Если часть событий уходит в трекер дважды, победит не лучший креатив, а более шумная ветка.

Не меняй структуру теста в процессе. Как только начал лить, не добавляй новые связки, не правь URL-метки и не пересобирай цели «по ходу дела». Иначе в отчете смешаются две разные выборки, а итог станет просто набором случайных кликов.

Лучше потратить 10 минут на проверку схемы, чем потом спорить с цифрами. Сначала чистый поток и одинаковые условия, потом выводы.