AB-тесты в монетизации ломаются не на статистике, а на плохой гипотезе
Если менять сразу цену, текст, порядок оффера и триал — вы не поймёте, что именно подняло ARPU или убило trial-to-paid. В монетизации тестируют один рычаг: либо цена, либо длительность триала, либо структуру paywall, либо формулировку value proposition.
Перед стартом зафиксируйте северную метрику: trial-to-paid, ARPPU, LTV или revenue per visitor. И заранее опишите guardrails: refund rate, churn, retention D7/D30, долю отмен в первые сутки. Иначе «победивший» вариант может дать больше выручки на входе и хуже удержать платящих.
Нормальный тест отвечает на один вопрос: «какое изменение увеличит доход на пользователя без просадки качества подписчика?». Для этого сегментируйте трафик: новые/возвратные, iOS/Android, гео, paid/organic. Часто эффект есть только в одном сегменте, а в среднем график выглядит как шум.
Не останавливайте тест по первой красивой неделе. Подписка живёт дольше первого платежа, поэтому смотрите когорты хотя бы до момента, когда часть пользователей дошла до второй попытки списания. Иначе вы оптимизируете не LTV, а CTR на кнопку.
Хороший AB-тест в монетизации меняет не экран, а решение: что показывать, кому и когда.
App Money Stack — subscriptions / IAP / LTV
@app_money_stack
AB-тесты в монетизации ломаются не на статистике, а на плохой гипотезе
Этот пост опубликован в Telegram-канале App Money Stack — subscriptions / IAP / LTV. Подписаться можно по ссылке: @app_money_stack.