Сезонность умеет полностью переворачивать когортный анализ, и заметить это непросто. Группа, пришедшая перед с

Сезонность умеет полностью переворачивать когортный анализ, и заметить это непросто. Группа, пришедшая перед сезоном высокого спроса, покажет отличное удержание в первые месяцы просто потому, что в это время покупают все. Группа, стартовавшая перед спадом, будет выглядеть провальной, хотя качество привлечения не менялось.
Ошибка здесь возникает на этапе выводов: сравнивают когорты по календарным месяцам, а не по одинаковому возрасту относительно старта. Правильное сравнение всегда идёт по возрасту когорты — первый месяц с первым, третий с третьим. Но даже так остаётся сезонный эффект, потому что третий месяц у разных когорт приходится на разное время года.
Практических способа два. Первый — сравнивать когорты с аналогичными по календарю за прошлые периоды, а не с соседними. Второй — просто держать сезонность в голове и не объявлять праздничную когорту доказательством улучшений.
Отдельно стоит помнить, что распродажный период приводит особую аудиторию: людей, чувствительных к цене. Их удержание закономерно ниже, и это не поломка, а свойство трафика.

—
Чтобы быть в курсе рынка — подпишись на @obzor_retenshena