🔧 Как я тестирую фичи в TMA — простой A/B

Ниша молодая, best practices неточные. Тестировать надо всё.

Мой процесс:
🔸 gathering — 200 юзеров минимум в тесте
🔸 splitting — 50/50 через seed от user_id
🔸 metrics — conversion в целевое действие
🔸 duration — минимум 7 дней

Что тестировал за 3 месяца:
✅ CTA-кнопка «Активировать» vs «Забрать»
→ «Забрать» +34% конверсия
✅ Onboarding 3 шага vs 5 шагов
→ 3 шага +18% completion rate
✅ Push через 24 часа vs через 48
→ 48 часов +12% retention

Инструмент:
🔸 своя простая A/B библиотека в React
🔸 Notion для трекинга результатов
🔸 Google Analytics для проверки

Что важно:
🔴 не тестируй 3 вещи сразу — путается
🔴 200 юзеров — минимум, лучше 500+
🔴 statistical significance проверять (p < 0.05)

Не всё имеет смысл тестировать. Но онбординг, CTA-тексты и push-timing — обязательно.

#Топхак
➖➖➖➖➖➖➖➖➖➖
Антон Хоменок про Telegram Mini Apps 📲