Хранение отчетов JMeter
#1
Отправлено 01 июня 2012 - 04:23
Возникла одна проблема. От версии к версии проводим нагрузочное тестирование, и возникает проблема с хранением-анализом результатов нагрузочных тестов (в итоге имеется большое количество jtl файлов). Часто возникают вопросы, есть ли регрессия, стало ли лучше / хуже / не изменилось, если изменилось - то на сколько (в тредах, транзакциях в минуту, время отклика, и вагон с тележкой других параметров).
Как вы решаете проблему с хранением-анализом-сравнением предыдущих результатов? Может, есть сервис по облачному хранению результатов, с графиками и другими плюшками? В частности, очень интересует наложение графиков различных прогонов. Видел http://blazemeter.com, но нужно только хранение результатов.
#2
Отправлено 01 июня 2012 - 05:51
Еще есть сервис http://loadosophia.org/ может это то что вам нужно?
#3
Отправлено 01 июня 2012 - 07:14
В своей компании мы написали свой веб-интерфейс и храним результаты там.
Еще есть сервис http://loadosophia.org/ может это то что вам нужно?
спасибо за ссылку, посмотрел. К сожалению, много чего не хватает - например, детальных отчетов по каждой из операций (не нашел как посмотреть, например, только процедуру авторизации), и наслоения разных отчетов друг на друга (сравнение).
#4
Отправлено 02 июня 2012 - 11:07
В своей компании мы написали свой веб-интерфейс и храним результаты там.
Еще есть сервис http://loadosophia.org/ может это то что вам нужно?
спасибо за ссылку, посмотрел. К сожалению, много чего не хватает - например, детальных отчетов по каждой из операций (не нашел как посмотреть, например, только процедуру авторизации), и наслоения разных отчетов друг на друга (сравнение).
Сравнение отчетов там есть. Если вы смотрели только публичные отчеты - там много чего не видно, что есть внутри за аутентификацией.
По поводу детализации по операции - этого и правда не хватает, со временем сделается.
Андрей Похилько
#5
Отправлено 06 июня 2012 - 14:12
Доброго времени суток, уважаемые форумчане!
Возникла одна проблема. От версии к версии проводим нагрузочное тестирование, и возникает проблема с хранением-анализом результатов нагрузочных тестов (в итоге имеется большое количество jtl файлов). Часто возникают вопросы, есть ли регрессия, стало ли лучше / хуже / не изменилось, если изменилось - то на сколько (в тредах, транзакциях в минуту, время отклика, и вагон с тележкой других параметров).
Если кратко, мы делаем это следующим образом:
1) Для итераций создается агрегирующий отчет по ранее определенному шаблону. В отчет вносятся данные о тюнинге, тестовой среде, тестах, нагрузках, результаты всех нужных метрик, описываются тренды, а также, найденные проблемы.
2) Агрегирующие отчеты хранятся в google docs как excel документ и доступен всем членам команды и другим инженерам. Для хранения логов jmeter и остальных артефактов используем NAS.
3) В агрегирующем отчете есть сссылка на место в котором хранятся артефакты для каждого из тестов.
#6
Отправлено 11 июня 2012 - 12:38
#8
Отправлено 02 июля 2012 - 11:32
По поводу детализации по операции - этого и правда не хватает, со временем сделается.
Кстати, оно уже сделалось.
Андрей Похилько
Количество пользователей, читающих эту тему: 1
0 пользователей, 1 гостей, 0 анонимных