Классическая ошибка: появился новый креатив или посадочная, лид говорит "запусти параллельно со старым". Звучит логично — сравнишь A/B. На деле это убивает данные обеих кампаний.
Вот что происходит. Трафик распределяется между двумя углами. Старый продолжает тянуть аудиторию, которую мог бы получить новый. Результат: новый угол не набирает достаточно данных для вывода, старый начинает работать хуже из-за разреженного трафика. Через две недели уже непонятно, плох ли новый угол сам по себе или просто "не было условий для честного теста".
Добавь сюда фактор: если новый угол действительно лучше, ты его недополучишь — часть бюджета уходила в проигрыш. Если он хуже — потратишь неделю на диагностику вместо того, чтобы перебить его за день.
Правило простое: выключи старый угол перед запуском нового. Дай новому минимум 200-300 конверсий без конкуренции за трафик. Только после этого запускай A/B, если хочешь. Первая неделя теста — это не сравнение, это диагностика. Сравнение начинается со второй недели, когда данных хватает.
Не верь логике "параллельно будет справедливее". Справедливость в тестировании — это изолированные условия, а не одновременный запуск.
Тестирование угла без отключения старого — как потерять месяц оптимизации
Этот пост опубликован в Telegram-канале True CPA — фейлы офферов и банхамеры партнёрок (@True_CPA). Все его публикации — на странице канала.
Открыть в Telegram