А/Б тесты работают только если знаешь, что менять

Большинство арбитражников запускают тесты вслепую: меняют всё подряд и надеются на чудо. Результат — потраченный бюджет без выводов.

Правильный А/Б:
• Меняешь ОДИН параметр. Креатив, аудитория, плейсмент, бид — выбери одно.
• Даёшь тесту минимум 100-200 конверсий на каждый вариант. Меньше — шум, а не данные.
• Ловишь статистическую значимость, а не первый день с лучшим результатом. День может быть везением.
• Записываешь результаты. Не в голове — в таблицу. Через месяц ты забудешь, почему вариант В был слабее.

Частая ошибка: менять сразу креатив, копию и таргет. Потом непонятно, что сработало. Тест развалился на стадии дизайна.

Второй момент — время теста. Две недели на каждый вариант минимум. За три дня данных будут скачки от времени суток, дня недели, платёжных циклов аудитории. Это не тренд, это шум.

Если результаты нестабильны, не увеличивай бюджет — углубляй тест. Добавь вариантов, жди больше конверсий, проверь, не сбилась ли аудитория.

А/Б тестирование — это про системность, не про везение. Один параметр, достаточно данных, честная статистика. Остальное приложится.