Выборка: 1,2 млн сессий, e-commerce и подписки; uplift — относительный прирост конверсии к контролю. 95% CI, интервал доверия: от 1,1% до 8,3%; p-value <0,05, то есть шум маловероятен при этой модели.
Где эффект чаще живёт:
— телефон до оплаты, если он не нужен для доставки;
— «компания/ИНН» в B2C-потоке;
— повтор email в форме с автопроверкой.
A ▮▮▮▮ vs B без поля ▮▮▮▮▮
Проверка перед удалением: сегментируйте mobile/desktop, новых/возвратных, оплаченные/начатые. MDE — минимальный детектируемый эффект — держите ниже 3 п.п. на вашей базе, иначе тест не увидит малый выигрыш.
Не удаляйте поле, если оно режет fraud, ускоряет саппорт или нужно для fulfillment. Конверсия в заказ — не единственная метрика; смотрите refund rate и долю ручной обработки.
Читайте число, не историю. [n=1,2 млн сессий · 95%]
Ltesocks отзывы — выплаты и развод или нет
@otzyvy_ltesocks
Медианный uplift от удаления одного поля в checkout: 4,7% на 18 A/B-тестах
Этот пост опубликован в Telegram-канале Ltesocks отзывы — выплаты и развод или нет (@otzyvy_ltesocks). Все его публикации — на странице канала.
Открыть в Telegram