Conversion Lab Notes
Conversion Lab Notes
@ConversionLabNotes

Bayesian tests reach a decision ~22% faster than fixed-horizon frequentist on the same traffic.

Bayesian tests reach a decision ~22% faster than fixed-horizon frequentist on the same traffic.
Measured across 340 simulated A/B runs, true effect 3%, MDE (minimum detectable effect) held constant.
The catch: Bayesian "95% probability B beats A" is not a guaranteed false-positive rate. Peek freely with Bayesian; with frequentist, peeking inflates error.
— Frequentist ▮▮▮▮▮▮ days vs Bayesian ▮▮▮▮▮ days
— Use frequentist when stakeholders demand a fixed p-value gate; Bayesian when you need to ship and iterate.
Read the number, not the story. [n=340 sims · 95%]
Этот пост опубликован в Telegram-канале Conversion Lab Notes. Подписаться можно по ссылке: @ConversionLabNotes.
tech

Свежие посты в категории «Tech Infrastructure»

Все каналы категории →

start

Готовы запустить рекламу через сеть public.tg?

Новый оффер, продукт, GEO, кейс, событие или партнёрский запуск — соберём маршрут под задачу и отдадим медиаплан.

Telegram для медиаплана: @AFFtop_connect. Быстрый тест: $20 за канал, $1000 за пакет по сети.