CRO без магии: 7 проверок, которые спасают тест от ложного лифта

CRO без магии: 7 проверок, которые спасают тест от ложного лифта

1) Формулируйте гипотезу как изменение поведения, а не «улучшение кнопки».
2) До старта фиксируйте primary metric и guardrails: конверсию, выручку, возвраты, ошибки формы.
3) Считайте минимально значимый эффект заранее: если тест не способен его поймать, он почти гарантированно даст шум.
4) Не режьте трафик по устройствам и гео без причины — иначе эффект легко потерять в подгруппах.

5) Смотрите на длительность по циклу спроса, а не по календарю: у e-commerce это часто важнее «ровных» 7 дней.
6) Проверяйте SRM и аномалии в логике сплита: перекос трафика убивает доверие к результату.
7) Если метрика выросла, но выросли и ошибки, и отказы, и время до оплаты — это не победа, а компромисс.

Финал простой: хороший CRO-тест начинается не с макета, а с метрики, выборки и правил остановки. Если этого нет, «лифт» почти всегда оказывается статистической иллюзией.