Как отличить аномалию в метриках от обычной сезонности и не сломать выводы

Как отличить аномалию в метриках от обычной сезонности и не сломать выводы

Почти любая метрика живёт волнами: день недели, час, зарплатные даты, праздники, поведение по каналам. Ошибка начинается, когда один всплеск принимают за проблему или успех и сразу меняют креативы, ставки и воронку.

Ищите аномалию не по одному значению, а по отклонению от своего базового паттерна:
— сравнивайте не только с прошлым днём, но и с такими же днями недели;
— смотрите на 3–7 одинаковых периодов подряд, а не на один пик;
— проверяйте, бьётся ли изменение в верхнем и нижнем уровне воронки.

Если упала конверсия, но трафик, CTR и глубина клика ведут себя ровно по своей сезонной линии — это часто не поломка, а внешний шум или сдвиг спроса. Если же одновременно просели несколько связанных метрик, ищите узкое место: трекинг, посадочную, скорость загрузки, качество источника.

Полезный фильтр: аномалия должна объясняться причиной, а сезонность — повторяться по похожему шаблону. Один раз совпало — ещё не закономерность. Два одинаковых провала по понедельникам уже похоже на цикл.

Перед любым решением сначала уберите шум: сверяйте периоды, разрезы по источникам и воронке, и только потом трогайте гипотезы.

—
Чтобы быть в курсе рынка — подпишись на @analyticsStack