Перцентиль: что это такое и зачем его используют при оценке сайтов
Перцентиль - это значение, ниже которого находится заданная доля наблюдений в выборке. P75 времени загрузки составляет 2,5 секунды. Это означает, что 75% наблюдений укладываются в 2,5 секунды, а остальные находятся выше этого уровня. Google оценивает Core Web Vitals по значению 75-го перцентиля полевых данных, поэтому одно среднее время загрузки само по себе не позволяет оценить, проходит ли сайт установленные пороги.
Как считается перцентиль
Все измерения выстраивают по возрастанию: от самого быстрого результата к самому медленному. Затем определяют значение, которое отсекает нужную долю наблюдений.
Для выборки из 100 замеров времени загрузки ориентиры такие:
- P50 (медиана) - половина наблюдений находится ниже этого значения, половина выше;
- P75 - 75% наблюдений находятся на этом уровне или ниже, остальные выше;
- P90 - 90% наблюдений находятся на этом уровне или ниже, остальные выше;
- P95 - 95% наблюдений находятся на этом уровне или ниже, остальные выше.
Формулировка через долю наблюдений здесь важна. Конкретный способ вычисления перцентиля зависит от метода: значение не всегда совпадает с одним из замеров, возможна интерполяция между соседними значениями. Поэтому корректно говорить «75% наблюдений находятся на этом уровне или ниже», а не «75-й замер из 100».
Для времени загрузки и задержек взаимодействия меньше - лучше. Направление шкалы задается самой метрикой, без него цифра перцентиля не читается.
Чем перцентиль отличается от среднего значения
Среднее арифметическое складывает все значения и делит сумму на количество наблюдений. Такой способ чувствителен к выбросам - аномально большим или маленьким значениям.
Пример с пятью посетителями:
| Визит | Время загрузки |
|---|---|
| 1 | 1 секунда |
| 2 | 1,2 секунды |
| 3 | 1,3 секунды |
| 4 | 1,5 секунды |
| 5 | 10 секунд |
Среднее здесь - 3 секунды. При этом четыре посетителя из пяти получили страницу быстрее чем за 1,5 секунды. Один аномально долгий визит изменил общую оценку, хотя типичный опыт остался в пределах полутора секунд.
Разница подходов сведена в таблицу:
| Подход | Что показывает | Ограничение |
|---|---|---|
| Среднее | Общий уровень с учетом всех замеров | Один выброс меняет оценку |
| P50 | Центр распределения | Не описывает медленную часть выборки |
| P75 и P90 | Характеризуют более медленную часть распределения | Требуют достаточного объема данных |
Перцентили не отменяют влияние выбросов полностью. P95 на малой выборке заметно сдвигается от пары очень медленных измерений. Разница в том, что выбор перцентиля делает это поведение явным: P50 описывает центр, P75 и P90 - точки в более медленной части распределения.
Почему Google использует 75-й перцентиль
Google оценивает три метрики Core Web Vitals по P75 полевых данных из Chrome UX Report (CrUX) - агрегированного набора сведений о реальном опыте пользователей Chrome за определенный период. Пороги для категории Good такие:
| Показатель | P75 для оценки Good |
|---|---|
| LCP | не более 2,5 секунды |
| INP | не более 200 мс |
| CLS | не более 0,1 |
В документации Google выбор 75-го перцентиля объяснен двумя критериями. Перцентиль должен охватывать большинство визитов и при этом не зависеть чрезмерно от выбросов. Эти цели частично противоречат друг другу: более высокий перцентиль лучше покрывает большинство, но с ростом перцентиля растет и влияние выбросов.
Там же приведен пример со 100 визитами: чтобы значение P95 оказалось под влиянием выбросов, достаточно 5 медленных просмотров с нестабильным соединением, а чтобы повлиять на значение P75, такие медленные просмотры должны дать уже 25 визитов из 100. Поэтому P75 описан как разумный баланс между двумя целями, а не как единственно возможный вариант. Подробнее - в материале Google про определение порогов Core Web Vitals. Статистическое определение термина - в справочнике NIST.
Строго говоря, P75 - это значение перцентиля, вычисленное по распределению полевых измерений, а не проверка «каждый визит прошел порог». Формулировка из документации: если минимум 75% просмотров соответствуют порогу Good, страница получает оценку Good по метрике.
Где посмотреть P75 своего сайта
PageSpeed Insights. После проверки URL инструмент показывает лабораторный замер и полевые данные из CrUX, если для страницы хватает объема. В полевом блоке видны значения P75 для LCP, INP и CLS и доли визитов по категориям Good, Needs Improvement и Poor. Описание полей - в справке PageSpeed Insights про данные CrUX.
Chrome UX Report. Те же данные доступны через API и CrUX Dashboard для страниц и целых сайтов. Уровень агрегации важен: цифры для конкретного URL и для всего источника (origin) считаются по разным выборкам и часто не совпадают.
Полевые данные CrUX - это скользящий 28-дневный период, а не моментальный замер. PageSpeed Insights обновляет агрегацию ежедневно за предыдущие 28 дней. Поэтому ускорение сайта не меняет P75 на следующий день: новое распределение накапливается постепенно, по мере замены старых наблюдений новыми.
Подробный материал о полевых данных, уровнях URL и origin и расхождениях с лабораторными тестами - в статье «CrUX: как Google измеряет производительность сайтов у реальных пользователей».
Когда перцентили полезнее среднего значения
Перцентили нужны везде, где распределение важнее одного усредненного числа:
- время ответа сервера;
- продолжительность запросов к базе данных;
- время загрузки страниц;
- задержки при взаимодействии с интерфейсом;
- время выполнения фоновых операций.
Практическая польза видна на паре P50 и P95. Если P50 находится в норме, а P95 существенно хуже, стоит отдельно исследовать медленные сценарии: тяжелые запросы, холодный кеш, особенности устройств и сетевых условий. Это позволяет определить, связана ли проблема с отдельными сценариями или затрагивает систему в целом. Пример: среднее время ответа API - 150 мс, а P95 - 1200 мс. Среднее выглядит спокойным, но примерно 5% запросов выполняются на уровне P95 или медленнее. Такие задержки могут приводить к заметным для пользователей паузам в работе интерфейса.
