Сообщений в теме: 13

[hiverise]

Поделитесь своим мнением об использовании этих программулин. Какие плюсы/минусы? Что удобно, а что не так.

Интересует меня ваше мнение и практические советы. 

[Freiman]

Если у вас нет каких-то специфичных требований, и подходят оба продукта, то берите то, что дешевле.

[hiverise]

Если у вас нет каких-то специфичных требований, и подходят оба продукта, то берите то, что дешевле.

Спасибо за ответ. 
Подходят оба на данный момент. Все же хочется узнать Ваши впечатления от использования этих продуктов.

Где возникают трудности и что не удобно?

[Freiman]

Подходят оба на данный момент. Все же хочется узнать Ваши впечатления от использования этих продуктов.
Где возникают трудности и что не удобно?

Ну, это вы сами должны попробовать, где будет удобно/неудобно именно вам. Это инструмент, который должен быть заточен под ваш конкретный процесс, и советы на форуме, скажем так, не всегда могут быть релевантны, поэтому я воздерживаюсь от конкретных предложений :)

[mousesna]

Предполагаю, что контекстом к вопросу служит интеграция с проектной Jira.

Топите за TestRail. Zephyr делает продажи только за счет красоты и за счет того что если в Jira не больше 10 пользователей - то лицензия на него стоит те же копейки что и на Jira.

 

Чуть больше конкретики:

У меня сейчас на одном из проектов тестировщики используют Zephyr - плюются (те, кто раньше работал с TestRail - в том числе).

На другом проекте мы тоже выбирали инструмент сами, и памятуя отзывы соседнего проекта, приобрели TestRail - тестировщики довольны.

 

Еще больше конкретики:

Два года назад я проводил исследование инструментов управления тестированием для довольно большого центра исследований и разработок. TestRail я тогда почему то не рассматривал, но Zephyr в short list из трёх инструментов таки вошел, однако вдумайтесь: суммарная оценка по 23-м критериям с весовыми коэффициентами у Zephyr-а была даже ниже чем у TestLink-а. Да-да! Даже бесплатный, некрасивый и неудобный от слова "совсем" TestLink оказался более щедрым на интеграционые возможности и намного более богатым по функциональности. 

 

Конкретика:

В отличие от Zephyr, TestRail обладает следующими свойствами:

- удобное разделение тестовых сценариев на тестовые наборы (например возможны различные уровни вложенности, в то время как в Zephyr уровень вложенности по сути один, что бывает не очень удобно)

- удобное функциональное разделение сущностей TestCase vs TestRun (в Zephyr такое разделение тоже есть, но оно скорее вызывает вопросы, чем оставляет ощущение легкости и удовлетворения от пользования)

- достаточно развитая подсистема отчетности (Zephyr на толковые отчеты крайне скуден, имеющиеся имхо - бестолковы)

- TestRail лицензируется по количеству реально пользующихся им пользователей, в то время как Zephyr лицензируется по количеству пользователей вашей Jira. То есть, если у вас в проекте 30 человек, из которых тестировщиков только пятеро + 1PM, то и за Zephyr и за TestRail вы заплатите 150$ в месяц. (хотя на первый взгляд Zephyr кажется более дешевым)

 

ПС работать можно как с тем, так и с другим. В конце концов, это всего лишь инструменты. Однако имея возможность выбирать - я бы выбирал TestRail. По крайней мере для моих задач он подходит больше.

[hiverise]

Предполагаю, что контекстом к вопросу служит интеграция с проектной Jira.

Топите за TestRail. Zephyr делает продажи только за счет красоты и за счет того что если в Jira не больше 10 пользователей - то лицензия на него стоит те же копейки что и на Jira.

 

Чуть больше конкретики:

У меня сейчас на одном из проектов тестировщики используют Zephyr - плюются (те, кто раньше работал с TestRail - в том числе).

На другом проекте мы тоже выбирали инструмент сами, и памятуя отзывы соседнего проекта, приобрели TestRail - тестировщики довольны.

 

Еще больше конкретики:

Два года назад я проводил исследование инструментов управления тестированием для довольно большого центра исследований и разработок. TestRail я тогда почему то не рассматривал, но Zephyr в short list из трёх инструментов таки вошел, однако вдумайтесь: суммарная оценка по 23-м критериям с весовыми коэффициентами у Zephyr-а была даже ниже чем у TestLink-а. Да-да! Даже бесплатный, некрасивый и неудобный от слова "совсем" TestLink оказался более щедрым на интеграционые возможности и намного более богатым по функциональности. 

 

Конкретика:

В отличие от Zephyr, TestRail обладает следующими свойствами:

- удобное разделение тестовых сценариев на тестовые наборы (например возможны различные уровни вложенности, в то время как в Zephyr уровень вложенности по сути один, что бывает не очень удобно)

- удобное функциональное разделение сущностей TestCase vs TestRun (в Zephyr такое разделение тоже есть, но оно скорее вызывает вопросы, чем оставляет ощущение легкости и удовлетворения от пользования)

- достаточно развитая подсистема отчетности (Zephyr на толковые отчеты крайне скуден, имеющиеся имхо - бестолковы)

- TestRail лицензируется по количеству реально пользующихся им пользователей, в то время как Zephyr лицензируется по количеству пользователей вашей Jira. То есть, если у вас в проекте 30 человек, из которых тестировщиков только пятеро + 1PM, то и за Zephyr и за TestRail вы заплатите 150$ в месяц. (хотя на первый взгляд Zephyr кажется более дешевым)

 

ПС работать можно как с тем, так и с другим. В конце концов, это всего лишь инструменты. Однако имея возможность выбирать - я бы выбирал TestRail. По крайней мере для моих задач он подходит больше.

 

Михаил, спасибо за обширный ответ.   

[Julia Atlygina]

Кроме Зефира и Test Rail есть еще куча инструментов:) почему вы сравниваете именно их? Если хочется поглубже в джире все держать, посмотрите на другие плагины, Zephyr далеко не лучший и уж точно не единственный

Вот тут есть (уже правда старенькая!) статья про инструменты тестирования в джире, + общее видео с обзором https://www.youtube....h?v=uv9TesICUSI. Если по JIRA какие-то вопросы - пишите:)

 

P.S. из этой пары лично я бы выбрала Test Rail: это отдельная система, специально сделанная для тестирования, а не впихнутая в рамки джиры насильно, может быть подороже, но на мой личный взгляд - удобнее. Никого не знаю, кто бы плевался от Teat Rail, с Zephyr - наоборот, мало кому нравится:)

[hiverise]

Кроме Зефира и Test Rail есть еще куча инструментов:) почему вы сравниваете именно их? Если хочется поглубже в джире все держать, посмотрите на другие плагины, Zephyr далеко не лучший и уж точно не единственный

Вот тут есть (уже правда старенькая!) статья про инструменты тестирования в джире, + общее видео с обзором https://www.youtube....h?v=uv9TesICUSI. Если по JIRA какие-то вопросы - пишите:)

 

P.S. из этой пары лично я бы выбрала Test Rail: это отдельная система, специально сделанная для тестирования, а не впихнутая в рамки джиры насильно, может быть подороже, но на мой личный взгляд - удобнее. Никого не знаю, кто бы плевался от Teat Rail, с Zephyr - наоборот, мало кому нравится:)

 

Юлия, спасибо за ответ и урлы.

Ознакомлюсь и скорее всего отпишусь Вам, уже есть вопросы ;) 

[hiverise]

 + общее видео с обзором https://www.youtube....h?v=uv9TesICUSI. 

 

Интересный доклад 

[mousesna]

почему вы сравниваете именно их? 

 

Юля, Вы ведь и в докладе своём это отмечаете: Zephyr - наиболее популярный на Atlassian Marketplace, TestRail - самый большой значок на слайде ;)

[clipsa]

Зефирку юзала, не понравилось - с виду красивенько, а по сути - много мелких неудобств, согласна с комментом mousesna.

ТестРейл юзать не довелось, но слышала, что он не плох.

[hiverise]

Зефирку юзала, не понравилось - с виду красивенько, а по сути - много мелких неудобств, согласна с комментом mousesna.

ТестРейл юзать не довелось, но слышала, что он не плох.

Спасибо за коммент.  

[mipars]

mousesna

не могли бы вы поделиться своим наработками по поводу сравнения инструментов. Вы упомянули что было около 23 критериев. Заранее спасибо.

[repon]

 

можете подсказать?

эти плагины регистрируют результаты прогона в Jira, создавая новые записи? или к имеющимся задачам (тест-кейсам - http://jira.site.com/browse/QT-123456 ) - могут проставлять статусы прогона тестов?