Среднее значение более 95 процентилей в метрах

Question

Мое среднее время отклика превышает 99 процентилей (в JMeter).

Answer 1

И что? Мой тоже.

Это нормальная ситуация, когда у вас есть:

• малое количество пробоотборников с большим временем отклика

а также

• большое количество пробоотборников с низким временем отклика

В приведенной выше настройке я использовал 1 Dummy Sampler с временем отклика 1000 миллисекунд и 100 Dummy Sampler с временем отклика 1 миллисекунды, что привело к среднему времени отклика 11 мс и 99% от 4 мс.

Дополнительная информация:

• JMeter Глоссарий
• процентиль
• Среднее арифметическое

Answer 2

Чтобы получить такие результаты, ваше время отклика выше 95-го и 99-го времени отклика должно быть действительно высоким. Например, допустим, у вас есть 100 запросов. Первые 94 выборки имеют время отклика 20 мс. С 95-й до 99-й выборки время отклика составляет: 30 мс. А 100-й запрос имеет время отклика 1500 мс.

Если взять среднее время отклика, оно будет: ((94 * 20) + (30 * 5) + (1000 * 1))/ 100, что составляет: 35,5 мс. Но значения 90-го и 99-го процентиля будут 30 мс.

Это не нормальная ситуация, согласно моему опыту. Лучше, если вы сможете выяснить, что заставило систему реагировать в неожиданно малое время отклика, и устранить проблему. (Попробуйте снова запустить скрипт и посмотреть, сможете ли вы воссоздать сценарий тоже)

Примечание: время ответа хуже, чем у 99-го процентиля, имеет большое значение

Для получения дополнительной информации: https://softwaretestresearch.blogspot.com/2019/03/qa-engineering-analysis-what-happened.html