Сайты посвящённые Pairwise Testing

Рай для любитилей ортогональных массивов -- http://www.pairwise.org/

Внесу свой вклад

http://www.stickymin...&ObjectType=ART

http://www.satisfice.com/tools.shtml

Рай для любитилей ортогональных массивов -- http://www.pairwise.org/

Привет!
Решил, что лучше возродить эту тему, чем новую создавать.
На pairwise.org сайте есть ссылки на инструменты. Вопрос вот в чем. Нужен тул для создания комбинаций при pairwise тестировании. Все параметры (коих несколько десятков) известны. Их зависимости - тоже.
Мы у себя проводили исследование нескольких тулов (каких не смогу сейчас сказать), но из всех понравился только PICT созданный в компании Майкрософт. К сожалению, скорее всего нам его использовать не удастся, по соображениям legal департамента.
Так вот, может кто посоветовать альтернативу. От тула надо:
1) free, другое даже не обсуждается
2) command line, это тоже required
3) возможность задавать правила и ограничения. Т.е. если параметр1="А", то параметр2 не может быть равен "Б". И тд. PICT это все умеет. Это *очень* желательно. Хотя можно устроить генерацию в два шага.
4) также желательно под unix, хотя и виндовому рад буду

Если кто имеет опыт работы с такими тулами, тоже интересно услышать мнения. В чем недостатки, что упрощается...
PS:Писать свой не будем точно. Хотя и интересная задача, но ресурсов нету.

Спасибо!

3) возможность задавать правила и ограничения. Т.е. если параметр1="А", то параметр2 не может быть равен "Б". И тд. PICT это все умеет. Это *очень* желательно.
Хотя можно устроить генерацию в два шага.

При пост-фильтеринге Вы потеряете валидные и нужные пары (это про " можно устроить генерацию в два шага").
Фильтровать нужно при генерации.

3) возможность задавать правила и ограничения. Т.е. если параметр1="А", то параметр2 не может быть равен "Б". И тд. PICT это все умеет. Это *очень* желательно.
Хотя можно устроить генерацию в два шага.

При пост-фильтеринге Вы потеряете валидные и нужные пары (это про " можно устроить генерацию в два шага").
Фильтровать нужно при генерации.

Надо подумать. Ведь если я получаю N комбинаций, среди которых есть неосуществимые, я могу их найти и убрать. Или убрав такие комбинации, я уберу еще и другие уникальные и валидные сочетания параметров, которые тоже есть в этих убранных комбинациях? Надо подумать... В любом случае механизм контроля за тем, что мы продолбали нужное сочетание пар у нас уже есть - так что будет сразу видно.

Писать свой не будем - нет ресурсов, а задача не из простых, хотя и интересная.

На самом деле, не настолько она сложная.
Я постараюсь все-таки в выходные собраться - доку набросать и выложить куда-нибудь свой вариант (на python).

О, спасибо, буду признателен. Правда вот питон смущает немного. У нас тут и так каша из разных языков и технологий. Питона еще пока нет :)

как опция - перейти к нам работать ;) У нас еще много всяких интересных [внутренних] наработок.

"Уж лучше Вы к нам!" (с) Бриллиантовая рука :)
Внутренних наработок(недоработок) у нас у самих много. Просто есть более приоритетные.

http://www.testersdesk.com/

Так вот, может кто посоветовать альтернативу.

Попробуйте Allpairs http://www.satisfice.com/tools.shtml
Она виндовая и не умеет работать с условиями, но остальным вашим требованиям удовлетворяет.

Попробуйте Allpairs http://www.satisfice.com/tools.shtml
Она виндовая и не умеет работать с условиями, но остальным вашим требованиям удовлетворяет.

Спасибо, конечно. Но уже свою написали, которая все делает, что надо.

Спасибо, конечно. Но уже свою написали, которая все делает, что надо.

Прошу прощения, что вмешиваюсь, а могу ли я на неё взглянуть или это слишком засекреченная разработка? :)
В последнее время функционала имеющихся решений перестало хватать. Видимо придётся самому писать.

В последнее время функционала имеющихся решений перестало хватать. Видимо придётся самому писать.

А чего именно не хватает?

А чего именно не хватает?

Например:

• возможности указывать взаимодействие каких параметров нужно проверять, а каких нет
• возможность подключения наборов векторов, что бы каждый раз одно и то же не вводить
• возможность использования различных алгоритмов в одной программе (вообще конечно такое в каждой второй реализации, но так криво сделано, что пользоваться неудобно)
• экспорт полученных наборов в нужном формате (хотя бы csv)
• возможность задания разброса для заданного параметра (для вариативности в регрессионных тестах)
• и ещё множество пунктов, которых прямо сейчас не вспомню

Нет, не написать конвертер результатов во все что нам нужно вообще дело пяти минут)

Нет, не написать конвертер результатов во все что нам нужно вообще дело пяти минут)

Для того, что бы добавить фичу к программе, должна быть эта программа. А так да, многие пункты реализовать просто, но вот почему-то не нахожу я таких реализаций.

Напишите сами

Для того, что бы добавить фичу к программе, должна быть эта программа. А так да, многие пункты реализовать просто, но вот почему-то не нахожу я таких реализаций.

Не очень понял, в чём проблема. Берёте, например, AllPairs от компании MetaCommunications, она лежит в открытом доступе на сорсфорже -- http://sourceforge.n.../trac/allpairs/ , подключаетесь к проекту, дописываете новые фичи.

Спасибо, конечно. Но уже свою написали, которая все делает, что надо.

Прошу прощения, что вмешиваюсь, а могу ли я на неё взглянуть или это слишком засекреченная разработка? :)
В последнее время функционала имеющихся решений перестало хватать. Видимо придётся самому писать.

Я спрошу. Но наврядли, т.к. это писалось в рабочее время одним из сотрудников и не предполагалось для внешнего пользования.
Решить может только одну проблему:
"Возможность указывать взаимодействие каких параметров нужно проверять, а каких нет"

Вообще писалось, на сколько помню, с PICT-a от майкрософта, который нам почему-то пользовать не разрешили по лицензионным соображениям.