Сколько трафика нужно, чтобы ASO-тест был не «на глаз», а по статистике

Сколько трафика нужно, чтобы ASO-тест был не «на глаз», а по статистике

Для ASO мало собрать «пару сотен» установок и выбрать победителя по CTR. Нужен объём, где разница между вариантами уже не похожа на шум. Смотри не на средний трафик, а на число показов и конверсию в установку по каждому варианту.

Ориентир простой: чем ниже текущая конверсия, тем больше нужно трафика. Если тестируешь скриншоты, иконку или первый экран, закладывай объём так, чтобы на каждый вариант набралось достаточно показов для сравнения, а не для «ощущений». Иначе один удачный день легко ломает картину.

Проверяй 3 вещи:
— одинаковый источник трафика и гео
— один главный KPI на тест
— заранее заданный минимум выборки, а не остановка по первому плюсу
Если у варианта мало событий, смотри шире: конверсию по связке листинга, а не по одному элементу.

Если нет возможности быстро набрать выборку, не делай выводы по раннему лидерству. Слабый тест хуже отсутствия теста: он создаёт ложную уверенность и тянет на себя следующий сплит. Лучше один честный тест с нормальным объёмом, чем пять «почти понятных» экспериментов.