AB-тест пейволла ломает не цена, а ошибка в метрике

AB-тест пейволла ломает не цена, а ошибка в метрике

Если сравнивать только trial-start или click-to-paywall, легко принять «победителя», который на деле снижает LTV. Для монетизации смотрят не один экран, а цепочку: показ → клик → старт триала → платёж → продление. Один слабый шаг может съесть весь прирост на верхнем уровне.

Главная ошибка — тестировать сразу несколько изменений: цену, порядок оффера, таймер, копирайт, бейдж «best value». Тогда выигрыш нельзя приписать одному фактору, а следующий тест становится шумом. Меняйте один смысловой элемент за раз и фиксируйте сегмент: new users, returning, geo, source.

Вторая ловушка — короткое окно. Подписка часто выглядит лучше на конверсии в день 1, но проигрывает на D7/D30 retention и refund rate. Считайте не только trial-to-paid, но и удержание по когортам после первой оплаты: именно там виден реальный LTV, а не красивый CTR 📈

Для решения держите минимальный набор правил: 1) до теста задайте primary metric, 2) заранее определите guardrails — refunds, churn, crash-free rate, 3) не останавливайте эксперимент по первому всплеску, 4) проверяйте результат отдельно по каналам трафика.

Лучший AB-тест монетизации — тот, где победа видна в paid retention, а не только в верхней воронке.