Отчеты и метрики группируют результаты выполнения в одном месте, что помогает отслеживать ход выполнения проекта.
Чтобы получить доступ к разделу «Отчет и показатели», выберите «Выполнение теста» → «Отчеты и показатели теста» на панели управления, как показано ниже.
Левая панель используется для перехода к каждому отчету и управления элементами управления поведением и отображением отчетов. Кнопка «Печать» инициализирует печать правой панели (навигация не печатается).
Вы можете распечатать как HTML или Pseudo MS Word. Вы также можете отправить отчет по электронной почте в формате HTML. На правой панели отображается сводка каждого отчета.
Общие показатели плана испытаний
Эти показатели отображают текущий статус плана тестирования по следующим критериям — набор тестов, владелец, этап, приоритет и ключевое слово.
В дополнение к этому, он также отображает основные метрики для всех включенных сборок. Текущий статус определяется последней сборкой, в которой выполняются тестовые случаи.
Например, если тестовый пример выполняется в нескольких сборках, учитывается только последний результат. Результат последнего теста — это концепция, используемая во многих отчетах, и определяется следующим образом:
-
Порядок сборки создается в плане тестирования. Например, если тест не пройден в сборке 1 и помечен как проходной в сборке 2, последний результат будет пройден.
-
Если тестовый случай выполняется несколько раз в одной и той же сборке, будет рассмотрено самое последнее выполнение. Например, если сборка 3 выпущена и помечена как «проходная» в 13:00 и помечена как «неудачная» в 17:00 — будет считаться неудачной.
-
Тестовые случаи, указанные в сборке как «No Run», не рассматриваются. Например, если тестовый пример помечен как «проходной» в сборке 1 и не выполняется в сборке 2, последний результат будет считаться «пройденным».
Порядок сборки создается в плане тестирования. Например, если тест не пройден в сборке 1 и помечен как проходной в сборке 2, последний результат будет пройден.
Если тестовый случай выполняется несколько раз в одной и той же сборке, будет рассмотрено самое последнее выполнение. Например, если сборка 3 выпущена и помечена как «проходная» в 13:00 и помечена как «неудачная» в 17:00 — будет считаться неудачной.
Тестовые случаи, указанные в сборке как «No Run», не рассматриваются. Например, если тестовый пример помечен как «проходной» в сборке 1 и не выполняется в сборке 2, последний результат будет считаться «пройденным».
Когда вы нажимаете Общие метрики плана тестирования в левой части экрана, отображаются все результаты, как показано ниже.
Результаты по тестам верхнего уровня — в нем перечислены результаты каждого набора верхнего уровня. Он отображает количество тестовых случаев со статусом «Пройдено», «Не выполнено», «Заблокировано», «Не выполнено» и «Завершено» (%). Результаты для люксов высшего уровня включают все люксы для детей.
Результаты по сборке — в нем перечислены результаты выполнения для каждой сборки. Для каждой сборки отображается общее количество тестовых случаев, общий проход, пройденный%, общий сбой,% сбой, заблокирован,% заблокирован, не запущен и% не выполнен. Если тестовый пример был выполнен дважды в одной и той же сборке, будет учтено самое последнее выполнение.
Результаты по ключевому слову. В нем перечислены все ключевые слова, назначенные наблюдениям в текущем плане тестирования, и результаты, связанные с ними. Для каждого ключевого слова отображаются итоговые тестовые случаи, общий проход, пройденный%, общий сбой,% сбой, заблокирован,% заблокирован, не выполнен и% не выполнен.