Замер скорости в тестовом сервисе и скорость у живых людей — две разные величины.

Замер скорости в тестовом сервисе и скорость у живых людей — две разные величины.

Лабораторный тест выполняется на предсказуемой машине, из одного места, при чистом кэше. Он хорош для сравнения версий между собой и для поиска ошибок. Он ничего не говорит о том, как открывается сайт у человека со старым телефоном в дороге.

Полевые данные собираются у реальных посетителей и показывают другое: разброс. И вот здесь начинается главное.

Смотреть на среднее бесполезно: несколько очень медленных сессий тянут его вверх, а множество быстрых прячут проблему. Смысл имеет распределение — какая доля людей укладывается в приемлемое время и как выглядят самые медленные случаи.

Что полезно разделять:

— первый визит и повторный: во втором работает кэш браузера, и картина сильно лучше;
— устройства: разница между новым и старым телефоном больше, чем между странами;
— типы страниц: главная, каталог и карточка ведут себя по-разному.

Оптимизировать стоит хвост, а не середину. Середина у большинства сайтов и так неплохая. 📊