А/Б тесты работают только если знаешь, что менять

Большинство арбитражников запускают тесты вслепую: меняют всё сразу, потом не понимают, почему результат другой. Вот что на самом деле нужно тестировать и в каком порядке.

Начни с одного элемента. Если тестируешь крео, оставь целевую аудиторию, плейсмент и бюджет неизменными. Меняй только видео или только заголовок. Две переменные одновременно — и ты не узнаешь, какая из них дала прирост. То же с аудиториями: если переходишь на новый сегмент, не меняй креатив.

Дай тесту прожить. Минимум 100-200 конверсий на каждый вариант — только тогда есть статистика. Если стопишь кампанию после 50 кликов, ты принимаешь решение на шуме. Выстоял первые 2-3 дня — проверь метрики, но не паникуй от дневных колебаний.

Документируй результаты. Напиши, какой элемент тестировал, когда, с какой аудиторией и что получилось. Через месяц не вспомнишь, почему отклонил этот вариант креатива, и будешь тестировать его заново. Общая база экспериментов — это твоя конкурентная база.

Если между двумя вариантами нет явного победителя, выбери тот, что дешевле в производстве. И переходи к следующему элементу. Охота за +0,5% ROI на одной переменной — это пустая трата времени. Лучше найти кардинально другой ракурс или аудиторию.

Символы: 847