Как тестировать разные формы и не сломать статистику

Как тестировать разные формы и не сломать статистику

Если меняете форму на лендинге, не смешивайте в один тест сразу поле, текст кнопки и порядок вопросов. Иначе вы не поймёте, что именно дало рост или просадку. Правило простое: одна гипотеза — один параметр.

Чтобы сравнение было чистым, держите одинаковыми источник трафика, креатив, оффер, устройство и гео. Любая разница в этих слоях создаёт шум сильнее, чем сама форма. Если трафик идёт из разных связок, тест уже отвечает не на тот вопрос.

Рабочая схема такая:
— дублируете страницу и меняете только один элемент;
— делите поток 50/50 или по другому фиксированному сплиту;
— не правите тест по ходу, пока не наберёте достаточно визитов;
— смотрите не только CR, но и качество лидов после формы.

Важно заранее решить, что считается победой: больше заявок, дешевле лид или выше доля валидных контактов. Без этого можно выбрать форму, которая красиво конвертит, но даёт мусор на обработке.

Чистая статистика начинается не с отчёта, а с дисциплины в тесте: один параметр, одинаковый трафик, фиксированное правило оценки.