Антикейс: новый угол тестируют рядом со старым и не понимают, что именно сломалось

Антикейс: новый угол тестируют рядом со старым и не понимают, что именно сломалось

Команда запускает свежий angle, оставляет старый креатив в том же адсете и начинает радоваться «росту объёма». Через пару дней падает CR, модерация режет частоту, а в отчёте смешаны две разные гипотезы. Итог: бюджет потрачен, выводов нет.

Что пошло не так:
— старый и новый угол конкурируют за одну аудиторию;
— меняется сразу несколько переменных: крео, преленд, оффер, аудитория;
— победитель определяется не по качеству, а по шуму в статистике;
— команда не фиксирует, какой элемент дал просадку.

Нормальный тест — это не «влить всё подряд», а изоляция одной гипотезы. Меняйте только один слой: либо угол, либо визуал, либо первый экран, либо хук. И держите старую связку отдельно, чтобы видеть базовую линию.

Если новый угол не бьёт старый в чистом сравнении, его рано масштабировать. Сначала добейтесь воспроизводимого выигрыша на одном сегменте, потом расширяйте спенд. Иначе вы не тестируете креатив — вы просто маскируете фрагментацию бюджета.