Сообщений в теме: 8

[dgorbacheva]

Привет всем! Ребята! Помогите ! Кто чем может!
Как можно оценить эффективность тестирования? Что под тим обычно понимается? И как это делать? Заранее спасибо

[Imbecile]

Обычно считают, что тестирование тем эффективнее, чем оно более полным образом покрывает функционал с определённой стороны. В идеале, функциональное тестирование должно покрыть весь функционал на предмет его корректной работы, тестирование производительности - покрыть на предмет скорости работы и т.д.

[dgorbacheva]

Это все понятно. Меня не совсем это интересует. меня интересуют метрики и формулы, рассчитав которые можно оценить эффективность тестирования

[Imbecile]

Вот тут что-то откопал.
http://www.citforum...._criterion/#2.2.

[Imbecile]

Вот тут что-то откопал.
http://www.citforum...._criterion/#2.2.

Мдя, и почему я МатАн с Вышкой так быстро забыл?
Если кто-то использовал подобную метрику на практике - поделитесь впечатлениями.

[barancev]

Вот тут что-то откопал.
http://www.citforum...._criterion/#2.2.

Мдя, и почему я МатАн с Вышкой так быстро забыл?
Если кто-то использовал подобную метрику на практике - поделитесь впечатлениями.

Это не матан, уважаемый, это алгебра :)

Подобную метрику по жизни использовать не нужно, ибо избыточно сложно. В статье же ясно сказано, что это формулировка метрик, адаптированная для генетических алгоритмов. Специфика в том, что для этого нужны метрики, которые позволяют оценить, в нужную ли сторону происходят мутации, то есть та же самая функция используется и как оценочная при отборе. А для этого нужна монотонность и (по-возможности) гладкость.

Список метрик, основанных на коде, которые указаны в заголовках разделов статьи вполне адекватный и достаточно представительный, это правда. В действительности же практически не существуюет промышленных инструментов, которые умеют измерять покрытие ветвей и покрытие путей. Самое лучшее, на что можно рассчитывать -- это покрытие операторов, включая учёт различных ветвей операторов условного перехода.

И самое главное -- метрики, основанные исключительно на коде, плохи тем, что они никак не учитывают тех требований, которые не реализованы. Так что 100% покрытие кода может прекрасно сочетаться с очень плохим покрытием требований. Так что будьте осторожны, основывая свои выводы об эффективности тестирования на таких метриках.

[Yury]

Вот тут что-то откопал.
http://www.citforum...._criterion/#2.2.

А эта ссылка прямого отношения к вопросу dgorbacheva не имеет.
В этой статье рассуждается о "тестовом покрытии", а не о "эффективности тестирования".

В зависимости от условий эти критерии могут как совпадать так и не совпадать.

Эффективность это мера того, насколько хорошо решены цели поставленные перед тестировщиками.
Сводить это только к "тестовому покрытию" - достаточно рискованное упрощение.

Юрий

[dgorbacheva]

Привет ребята! Спасибо за то, что откликнулись! Почитала ваши комментарии. уже кое-что прояснилось! Прикрепляю файл - откопала в интернете. Посмотрите, может сможете подсказать насколько представленные формулы и метрики соответствуют тому что мне надо. Еще раз напомню - мне нужно понять чем эффективность ТЕСТИРОВАНИЯ отличается от тестового покрытия. И как эту эффективность можно оценить.

Прикрепленные файлы

•  Measuring_the_Effectiveness_of_a_Test.pdf   48,02К   257 Количество загрузок:

[zemljak]

barancev, это математический анализ вкупе с булевой алгеброй (или теорией графов, кому как нравится)