Почему А/Б тест одного параметра — это не тест

Большинство арбитражников меняют одновременно креатив, аудиторию и ставку, потом смотрят на результат и называют это тестированием. На деле так ты не поймёшь, что сработало. Правильный A/B тест — это когда меняется ТОЛЬКО один параметр, всё остальное заморожено.

Тестируй по приоритетам. Сначала креатив — это 60-70% результата. Потом таргетинг. Потом ставки и плейсменты. Если менять всё сразу, даже при положительном результате ты не будешь знать, на какой элемент ставить в следующей кампании. Статистика размывается, и ты снова начинаешь с нуля.

Длительность теста зависит от объёма трафика. На малых бюджетах 100-200 конверсий на вариант — минимум, иначе случайность будет больше сигнала. Если в день набираешь 20 конверсий, значит, тест работает минимум 10 дней. Спешка убивает результативность.

Отслеживай только метрику, которая решает. Если оптимизируешь по ROI, смотри ROI. Если по ROAS — ROAS. Прыгать между метриками во время теста — это как менять правила игры на ходу. Выбрал метрику → придерживайся её до конца.

Заведи таблицу с результатами каждого теста: что менял, какой был результат, выводы. Через месяц начнёшь видеть закономерности в своих данных — это куда ценнее, чем случайные догадки.