Сообщений в теме: 12

[Evmorov]

Здравствуйте!

 

Запускаю тестраны и сохраняю их в jtl и csv. Требуется наглядно сравнить результаты запусков.

Посоветуйте программу или plugin, который может это сделать?

 

Пробовали и не подошли:

https://loadosophia.org

http://blazemeter.com

[fesd]

В жметре в директории extras имеются xsl шаблоны, с помощью которых на выходе можно получать html документ с отчетом. Для графиков можно использовать http://jmeter-plugin...eterPluginsCMD/

[APC]

А чего именно не хватило в Loadosophia.org? 

 

 

Здравствуйте!

 

Запускаю тестраны и сохраняю их в jtl и csv. Требуется наглядно сравнить результаты запусков.

Посоветуйте программу или plugin, который может это сделать?

 

Пробовали и не подошли:

https://loadosophia.org

http://blazemeter.com

[Evmorov]

В жметре в директории extras имеются xsl шаблоны, с помощью которых на выходе можно получать html документ с отчетом. Для графиков можно использовать http://jmeter-plugin...eterPluginsCMD/

Спасибо, разбираемся как сделать. Пока не поняли как в итоге сравнивать разные прогоны.

[Evmorov]

 

А чего именно не хватило в Loadosophia.org? 

 

 

Здравствуйте!

 

Запускаю тестраны и сохраняю их в jtl и csv. Требуется наглядно сравнить результаты запусков.

Посоветуйте программу или plugin, который может это сделать?

 

Пробовали и не подошли:

https://loadosophia.org

http://blazemeter.com

 

Нашли возможность сравнивать прогоны только по двум параметрам. На странице имеется кнопка "menu", но она не работает. Хотелось бы уметь сравнивать как минимум графики от perfmon plugin.

[fesd]

 

В жметре в директории extras имеются xsl шаблоны, с помощью которых на выходе можно получать html документ с отчетом. Для графиков можно использовать http://jmeter-plugin...eterPluginsCMD/

Спасибо, разбираемся как сделать. Пока не поняли как в итоге сравнивать разные прогоны.

 

А глазами сравнивать таблички и графики не подходит? Почему?

[Evmorov]

 

 

В жметре в директории extras имеются xsl шаблоны, с помощью которых на выходе можно получать html документ с отчетом. Для графиков можно использовать http://jmeter-plugin...eterPluginsCMD/

Спасибо, разбираемся как сделать. Пока не поняли как в итоге сравнивать разные прогоны.

 

А глазами сравнивать таблички и графики не подходит? Почему?

 

1) Это неудобно и сложно

2) Нет возможности составлять и отображать отчёт

3) Есть подозрение что на больших файлах создание html с помощью xsl не справится

[AxelM]

Мне тоже интересен вопрос чем не подошла loadosophia?

Еще до её создания написал сравнение результатов на perl, сейчас переписал на python+matplotlib.

Если есть конкретные вопросы, могу попробовать подсказать конкретным кодом. До выкладывания в open source мой сугубо "под свои задачи" проект не подходит.

[APC]

Нашли возможность сравнивать прогоны только по двум параметрам. На странице имеется кнопка "menu", но она не работает. Хотелось бы уметь сравнивать как минимум графики от perfmon plugin.

 

У меня еще вопрос: что для вас значит "сравнивать графики" и вообще "сравнивать"? Вам хочется увидеть на одном графике два ряда из разных тестов? Или хочется оценок типа "в тесте А среднее потребление CPU на 10% выше чем в тесте B"? Или что-то другое?

 

Мой интерес не праздный, я планирую в будущем развивать тему сравнения тестов в лоадософии. Поэтому интересуюсь потребностями пользователей.

[EvgenyLuvsandugar]

Можете попробовать мою поделку которую я сделал по рабочим нуждам. Там сейчас сделано 3 простых отчета, Aggregate - просто табличка и графики, Compare - сравнение двух отчетов, Percentiles - выводятся 50-60-70-80-90% line. Сделано на python+pandas+mathplotlib так что, самый простой способ запустить поставить сборку питона Anaconda.

 

Правда там все очень просто и заточено на сравнение каждого теста в отдельности, мот вам такое и не подойдет. Но в pandas довольно быстро можно сделать любой отчет какой вам нужен.

 

Запускается просто 

python jemeterreports.py Aggregate <имя-csv-файла>

 или 

python jemeterreports.py Compare <имя-1-csv-файла> <имя-2-csv-файла>

[Evmorov]

 

Нашли возможность сравнивать прогоны только по двум параметрам. На странице имеется кнопка "menu", но она не работает. Хотелось бы уметь сравнивать как минимум графики от perfmon plugin.

 

У меня еще вопрос: что для вас значит "сравнивать графики" и вообще "сравнивать"? Вам хочется увидеть на одном графике два ряда из разных тестов? Или хочется оценок типа "в тесте А среднее потребление CPU на 10% выше чем в тесте B"? Или что-то другое?

 

Мой интерес не праздный, я планирую в будущем развивать тему сравнения тестов в лоадософии. Поэтому интересуюсь потребностями пользователей.

 

Было бы здорово иметь такую же табличку как есть, только с бОльшим количеством параметров (тем же CPU, Memory, HDD). В идеале, все те параметры, которые собираются и есть в обоих тестах.

По поводу графиков. Тоже самое что есть на вкладке Composite Timeline Analysis, только для двух тестов.

Нам не столько важны результаты одного теста, сколько сравнение двух результатов разных тестов. Наша цель - сравнивать производительность разных версий приложения.

[Evmorov]

 

Можете попробовать мою поделку которую я сделал по рабочим нуждам. Там сейчас сделано 3 простых отчета, Aggregate - просто табличка и графики, Compare - сравнение двух отчетов, Percentiles - выводятся 50-60-70-80-90% line. Сделано на python+pandas+mathplotlib так что, самый простой способ запустить поставить сборку питона Anaconda.

 

Правда там все очень просто и заточено на сравнение каждого теста в отдельности, мот вам такое и не подойдет. Но в pandas довольно быстро можно сделать любой отчет какой вам нужен.

 

Запускается просто 

python jemeterreports.py Aggregate <имя-csv-файла>

 или 

python jemeterreports.py Compare <имя-1-csv-файла> <имя-2-csv-файла>

Спасибо! Посмотрим!

А с каких именно Listener'ов можно использовать csv файлы?

[EvgenyLuvsandugar]

 

 

Можете попробовать мою поделку которую я сделал по рабочим нуждам. Там сейчас сделано 3 простых отчета, Aggregate - просто табличка и графики, Compare - сравнение двух отчетов, Percentiles - выводятся 50-60-70-80-90% line. Сделано на python+pandas+mathplotlib так что, самый простой способ запустить поставить сборку питона Anaconda.

 

Правда там все очень просто и заточено на сравнение каждого теста в отдельности, мот вам такое и не подойдет. Но в pandas довольно быстро можно сделать любой отчет какой вам нужен.

 

Запускается просто 

python jemeterreports.py Aggregate <имя-csv-файла>

 или 

python jemeterreports.py Compare <имя-1-csv-файла> <имя-2-csv-файла>

Спасибо! Посмотрим!

А с каких именно Listener'ов можно использовать csv файлы?

 

 

Я использую aggregate report или simple data writer (они дают на выходе одно и то же) с настройками чтобы они генерили csv вместо xml.

 

Если что пишите в скайп, может докручу то что вам нужно, если не сложно будет или могу просто прислать пример отчета, чтобы глянули и даже не заморачивались если вам не подходит :)