Почему «Mediavine платит в 2 раза больше Ezoic» — плохой тест

Почему «Mediavine платит в 2 раза больше Ezoic» — плохой тест

Тезис: сайт переехал с Ezoic на Mediavine/Raptive, RPM вырос, значит сеть лучше. Звучит правдоподобно: у премиальных сеток часто сильнее спрос, строже отбор и чище инвентарь.

Звёздочка: сравнивают не сеть, а весь новый сетап. После миграции меняются плейсменты, ad density, lazy load, consent, скорость, доля mobile и страницы, куда пришёл трафик.

🚩 Hidden variable: география и интент. US how-to статья и viral-пост с дешёвым трафиком могут жить на одном домене, но для аукциона это разные планеты.

Как тестировать без самообмана:
— смотреть page RPM по группам URL, не средний RPM;
— отделять organic, social, referral;
— фиксировать число блоков и viewability;
— сравнивать одинаковые окна, без «лучших трёх дней».

Не говорю, что Mediavine, Raptive или Ezoic плохие — говорю, что сравнение подстроено, если скрытые переменные гуляют.