Selenium + JMeter для нагрузочного тестирования

Привет Всем!

Я пытаюсь реализавать связку Selenium + JMeter для нагрузки.

Имею следующие результаты: при помощи Selenium IDE записываю приблизительный скрипт, потом создаю в eclipse java проджект подключаю Selenium RC библиотеки и JUnit библиотеку, правлю и отлаживаю там скрипт полученный в Selenium IDE и делаю jar файл, потом с помощью JMeter прогонят этот junit test для многих юзеров.

Вот такая схема, но!!! Получатся в JMeter скрипт только виден только как черный ящик, а хотелось бы туда например логины и пароли передавать.

Помогите как это сделать!

Привет Всем!

Я пытаюсь реализавать связку Selenium + JMeter для нагрузки.

Имею следующие результаты: при помощи Selenium IDE записываю приблизительный скрипт, потом создаю в eclipse java проджект подключаю Selenium RC библиотеки и JUnit библиотеку, правлю и отлаживаю там скрипт полученный в Selenium IDE и делаю jar файл, потом с помощью JMeter прогонят этот junit test для многих юзеров.

Вот такая схема, но!!! Получатся в JMeter скрипт только виден только как черный ящик, а хотелось бы туда например логины и пароли передавать.

Помогите как это сделать!

Зачем так сложно ?
Почему вам просто не сделать Jmeter скрипты самому (как вариант воспользоваться рекордером).

Зачем так сложно ?
Почему вам просто не сделать Jmeter скрипты самому (как вариант воспользоваться рекордером).

Скажите тогда пожалуйста. Возможно ли записывать через JMeter скрипт на GUI уровне? Или только на уровне запрос ответ?

Вы говорите через selenium сложно - но ведь там писать можно на GUI уровне - а это очень хорошо и ясно)))

Скажите тогда пожалуйста. Возможно ли записывать через JMeter скрипт на GUI уровне? Или только на уровне запрос ответ?

Да возможно, но только для http протокола, например если у вас GUI действия результируют http траффик они будут записаны.
Кстати, Селениум работает по такому же принцыпу.

Скрипт seleniumа получается приблизительно следующий (все ясно и понятно!):
selenium.open("http://ххх/app/login/login.jsp");
assertEquals("First Cal LOGIN", selenium.getTitle());

//Login to the application
selenium.type("j_username",Login);
selenium.type("j_password",Password);
selenium.click("button2");
selenium.waitForPageToLoad("30000");
assertEquals("First Cal MAIN SECURE PAGE", selenium.getTitle());

Может ли так JMeter? (сомневаюсь)

Скрипт seleniumа получается приблизительно следующий (все ясно и понятно!):
selenium.open("http://ххх/app/login/login.jsp");
assertEquals("First Cal LOGIN", selenium.getTitle());

//Login to the application
selenium.type("j_username",Login);
selenium.type("j_password",Password);
selenium.click("button2");
selenium.waitForPageToLoad("30000");
assertEquals("First Cal MAIN SECURE PAGE", selenium.getTitle());

Может ли так JMeter? (сомневаюсь)

Не может и в принципе не должен, так как Jmeter не есть тул для функционального тестирования.
Он интерпретирует записанные действия в тестплан, своего рода GUI сценарий.

Жметр тоже может такое делать, единственно он толко перехватит ваш пост/гет запрос и отправит его сам, сессия и куки можно подставлять реальные или использовать заглушки(переменные), ассертить то что возвращается жметр тоже умеет и условные переходы там есть, можно кстати записать первоначальный скрипт либо используя прокси у жметра, либо сторонний софт например BadBoy.Для жметра есть кстати плагины позволяющие разрулить пользователей для близкой к реальной эмуляции их поведения.

После перерыва я опять занялся этой темой. И добился нормальных результатов. То есть получилось содинить Selenium + Jmeter. осталось придумать как мерять результат что бы было наглядно ).
Думаю есть перспектива для работы и с AJAX.

После перерыва я опять занялся этой темой. И добился нормальных результатов. То есть получилось содинить Selenium + Jmeter. осталось придумать как мерять результат что бы было наглядно ).
Думаю есть перспектива для работы и с AJAX.

Каким образом соединили ?

Каким образом соединили ?

Делаю джарку и с помощью java request запускаю ее через jmeter на много узеров. Вот только возникает проблема что firefox с проблемами запускает много раз себя.
Продолжаю двигаться в этом направлении.
Может у кого есть мысли по этому поводу?

Каким образом соединили ?

Делаю джарку и с помощью java request запускаю ее через jmeter на много узеров. Вот только возникает проблема что firefox с проблемами запускает много раз себя.
Продолжаю двигаться в этом направлении.
Может у кого есть мысли по этому поводу?

Я думаю что это не есть красивый метод интеграции и, сомневаюсь, что такой подход можно назвать интеграцией.
Мой вам совет раньте функциональные тесты и нагрузочные отдельно друг от друга.

Я думаю что это не есть красивый метод интеграции и, сомневаюсь, что такой подход можно назвать интеграцией.
Мой вам совет раньте функциональные тесты и нагрузочные отдельно друг от друга.

Полностью поддерживаю Atomic_A@ukr.net. Нечего мешать "мелкое" с "мягким"... :)

Но если же вы все таки хотите использовать функциональные тесты при тестировании производительности, то делайте это на примере продуктов меркюри (запуск скриптов WinRunner или QTP в LoadRunner). На сколько я знаю, в их случае скрипты запускаются на отдельных машинах. На сколько это будет удобно не знаю, но как вариант использования попробовать можно...

Вот...

Полностью поддерживаю Atomic_A@ukr.net. Нечего мешать "мелкое" с "мягким"... :)

Но если же вы все таки хотите использовать функциональные тесты при тестировании производительности, то делайте это на примере продуктов меркюри (запуск скриптов WinRunner или QTP в LoadRunner). На сколько я знаю, в их случае скрипты запускаются на отдельных машинах. На сколько это будет удобно не знаю, но как вариант использования попробовать можно...

Вот...

Где взять пол миллиона долларов?

Где взять пол миллиона долларов?

Используйте тот же Jmeter и Selenium и будет вам счастье практически бесплатно.

Похоже мое исследование зашло в тупик. Очень жаль :(

Проблема в том что для каждого юзера запускается свой браузер (это в случае теста написанного на selenium), а компьютер попросту тупит когда запущено много firefox да и сам ff тупит, к тому же firefox не может запускаться очень много раз одновременно без ошибок (при более 10 браузерах некоторые другие уже открывабтся с ошибками).

Нашел статью о возможности запуска браузера в background режиме, но это наврядли решит проблему.

Может у кого-нубудь есть опыт работы с браузером в background?

Может у кого-нубудь есть опыт работы с браузером в background?

Вы все не угомоннитесь
Просто поймите что игра не стоит свеч по многим причинам, а основное это то что результаты такого тестирования не есть "чистыми".

Похоже мое исследование зашло в тупик. Очень жаль :(

Проблема в том что для каждого юзера запускается свой браузер (это в случае теста написанного на selenium), а компьютер попросту тупит когда запущено много firefox да и сам ff тупит, к тому же firefox не может запускаться очень много раз одновременно без ошибок (при более 10 браузерах некоторые другие уже открывабтся с ошибками).

Нашел статью о возможности запуска браузера в background режиме, но это наврядли решит проблему.

Может у кого-нубудь есть опыт работы с браузером в background?

Могу предложить вам альтернативное решение:
1. Выбросьте Селениум на свалку
2. Возьмите htmlunit/httpunit и работайте с ними... Их браузеры не видимые и создаются в бекграунде. Но будьте осторожны, т.к. можно очень легко схватить OutOfMemory...

У selenium (в ночных сборках точно) есть режим *mock - эмулятор браузера. Как и в случае httpUnit/jwebUnit вы получите очень шустрые тесты, но фиговую поддержку js

JMeter не прокатит. Вам сюда: http://browsermob.com/

Спасибо!
Очень ценно!

Разбираемся )