Чек-лист A/B-теста креатива: как читать результат, а не просто выбирать победителя

Чек-лист A/B-теста креатива: как читать результат, а не просто выбирать победителя

Сравнивайте не только CTR. У креатива может быть высокий клик, но слабый постклик: тогда он притягивает внимание, а не качество трафика. Смотрите цепочку целиком — показ, клик, первый экран, целевое действие.

Перед тем как объявлять победу, проверьте:
• одинаковый ли у теста сплит и источник трафика
• одинаковая ли аудитория и плейсменты
• не поменялся ли лендинг между версиями
• хватило ли объёма, чтобы шум не маскировал разницу

Если один вариант выигрывает на верхе воронки, а второй — на конверсии, это не ошибка. Это сигнал, что разные углы работают на разные этапы. Один креатив цепляет скролл, другой снимает сомнение после клика. Для CPA это часто важнее, чем красивый CTR сам по себе.

Разбирайте не “победил / проиграл”, а где именно сломалась механика: заголовок, визуальный триггер, обещание, первый экран, форма. Ищите не лучший баннер, а лучший путь пользователя.

Вывод простой: хороший A/B-тест креатива отвечает не на вопрос “что зашло?”, а на вопрос “почему это дошло до действия”.