5 ошибок в тестах лендинга, из-за которых A/B дает ложные победы

5 ошибок в тестах лендинга, из-за которых A/B дает ложные победы

1) Смешивают скорость и гипотезу. Если на одной версии тяжелее герой-баннер или скрипт аналитики, вы тестируете не контент, а лаги. Сначала фиксируйте базовую производительность: вес страницы, LCP, задержку интерактива.

2) Мало трафика и слишком много вариантов. При дроблении на 3–4 версии выборка становится шумом. Для лендинга лучше один сильный контраст и заранее заданная метрика: лид, клик, отправка формы.

3) Смотрят только на конверсию. Бывает, форма собирает больше заявок, но растет отказ на следующем шаге. Проверяйте не только CR, но и микроконверсии, ошибки формы, глубину скролла, время до первого действия.

4) Меняют тест по пути. Любая правка текста, верстки или трекинга ломает сравнение. Зафиксируйте состав страниц, проверьте события и не трогайте эксперимент до набора достаточной выборки.

Вердикт для продакшена: сначала уберите технический шум, потом сравнивайте смысл. Если версия быстрее, чище и стабильнее по метрикам, A/B покажет реальный эффект, а не случайность.