Как отличить аномалию в метриках от обычной сезонности без ложных тревог

Как отличить аномалию в метриках от обычной сезонности без ложных тревог

Не паникуйте из-за одного провала или всплеска: сначала проверьте, есть ли у метрики повторяющийся ритм. Сезонность обычно идет по знакомому сценарию: день недели, час, начало/конец месяца, праздники, зарплатные циклы. Аномалия ломает этот рисунок и выглядит как сдвиг, которого раньше не было.

Смотрите не только на сам показатель, но и на соседние: CTR, CR, CPA, апрув, доход на клик. Если просела одна метрика, а остальные держатся, причина может быть в креативе, посадке или трекинге. Если одновременно едет несколько звеньев воронки, ищите проблему в источнике трафика, оффере или фильтрации.

Полезный фильтр — сравнение с тем же периодом прошлого цикла: день к дню, понедельник к понедельнику, утро к утру. Еще лучше — держать скользящее среднее и диапазон нормы. Все, что выходит за привычный коридор и повторяется несколько точек подряд, уже повод копать глубже 🔎

Проверяйте разрезы: источник, гео, устройство, плейсмент, связку, постбэк. Часто общая метрика выглядит «сломавшейся», хотя аномалия сидит в одном сегменте и просто тащит вниз общий итог.

Если график выбивается из паттерна и подтверждается в нескольких срезах — это аномалия. Если отклонение повторяется в те же часы и дни, это сезонность. Сначала ищите повторяемость, потом масштаб, и только после этого режьте гипотезы.