Почему метрики врут, а ты их слушаешь

Аналитика — не истина в последней инстанции, а инструмент с ограничениями. Научитесь их видеть, иначе будете принимать решения на основе неполных данных.

Атрибуция скрывает половину пути. Последний клик перед конверсией получает весь кредит, а первый контакт остаётся в тени. Юзер может увидеть ваше объявление, забыть про него, потом вернуться через поиск — и вы подумаете, что работает только SEO. Не забывайте про multi-touch модели и помните: даже они дают упрощённую картину.

Выборка определяет результат. Сравниваете две кампании по одной метрике? Проверьте пол, возраст, время суток и девайсы аудитории. Если различия в целевой группе — различия в метриках неизбежны. То, что показало результат на Android-пользователях, может провалиться на iOS.

Корреляция не равна причине. CTR вырос одновременно с падением CPC? Может быть, это сезон, а не ваша кампания. Была акция конкурента, изменилась выдача поиска или просто больше люди времени в интернете. Ищите контрольные группы — они дороже, но честнее.

Чтобы аналитику не обманывала: делите данные по когортам, смотрите на графики, а не на один число, и не верьте метрике, пока не нашли механизм, который её движет.