A/B-тест креативов ломается не в крео, а в настройке разделения трафика

A/B-тест креативов ломается не в крео, а в настройке разделения трафика

Если тестируешь сразу несколько переменных, статистика становится шумом. В одном запуске меняй только один параметр: заголовок, визуал, оффер или CTA. Иначе ты не поймёшь, что именно дало рост CTR или просадку по CR.

Разделяй трафик так, чтобы группы были одинаковыми по источнику, плейсменту, гео и устройствам. Нельзя сравнивать креативы, если один вариант получает более «тёплую» аудиторию. Лучше заранее зафиксировать условия и не трогать их до конца теста.

Следи за объёмом: у теста должен быть минимум по кликам или показам на каждый вариант, иначе выводы будут случайными. Оценивай не только CTR, но и дальше по воронке: лид, подтверждение, апрув. Креатив с красивым CTR может давать мусорный трафик.

Не меняй бюджет и не перезапускай связки в процессе. Если алгоритм уже начал обучаться, любое ручное вмешательство смешает результаты. Для чистого A/B теста держи одинаковую ставку, одинаковые лимиты и один срок проверки для всех вариантов.

Сначала фиксируй условия, потом сравнивай креативы. Иначе ты тестируешь не баннеры, а хаос.