Разбор проваленного конкурентного теста.
Контекст: на рынке связи запустили «акцию», где оператор платил клиентам за входящие звонки с номеров других сетей. Конкуренты не стали играть в продукт — они просто урезали максимальную длительность звонков на номера этого оператора.
Что это по сути? Не growth, а грязный A/B без рандомизации, без контрольной группы и без нормальной метрики. Вместо проверки ценности для пользователя — попытка сломать воронку сопернику. Итог предсказуем: ФАС попросила прекратить этот цирк.
Действие: когда у вас вместо эксперимента начинается эскалация «а мы вам тоже отрежем», это уже не конкуренция, а серия плохо спроектированных тестов с одним общим багом — никто не меряет долгосрочный эффект, только реакцию на один ход.
Результат: краткосрочный шум есть, устойчивого роста нет. Зато есть риск регуляторного вмешательства, искажение поведения пользователей и мусор в данных. 😏
Шпаргалка: если акция меняет поведение рынка целиком, а не один сегмент, это не гипотеза. Это пожар.
A/B Test Room
@ABTestRoomPro
Разбор проваленного конкурентного теста.
Этот пост опубликован в Telegram-канале A/B Test Room. Подписаться можно по ссылке: @ABTestRoomPro.