Testautomation Overview im KIG-Dashboard
Einstiegsseite des TA Studios mit zentraler, aktueller Übersicht
Die Dashboard-Ansicht im TA Studio liefert einen sofortigen Überblick über alle Testaktivitäten und deren Stati im kompletten Testlabor.
Die Ergebnisse der aktuellen Testläufe inkl. Analyse und Bewertung ist transparent. Hier lassen sich die aktuellen Test Scenario Ergebnisse betrachten und in der Fehlerbewertung kann man direkt mit der Analyse auf der gewünschten Auswertungstiefe einsteigen.
Ein graphischer Überblick bietet die Statistik bzgl. der letzen 10 Tage als Ergebnisstatistik und die kommenden 10 Tage als Planungsgröße.
Statistik der aktuellen Testszenarien
Übersicht aller Testaktivitäten
Systemdaten im Testlabor
Analyse- & Reporting-Stufen
Level 1: Overview
Es wird das gesamte Projekt betrachtet, das sind alle Testdurchläufe aller Scenarien eines Projektes. Ziel dieses Reports ist, eine Übersicht über die Ergebnisse dieser Testdurchläufe zu erhalten. Dazu werden die Ergebnisse auf verschiedenen Ebenen kumuliert angezeigt.
Level 2: Scenario Run
Es wird EIN Scenario (Summe an fachlich zusammengehörigen Testfällen - zentrale Entität) betrachtet. Es werden alle Testläufe (Testruns) eines Test-Scenarios ausgewertet und eine statistische Übersicht der Ergebnisse generiert.
Level 3: Scenario-Run-Detail
Es wird EIN Testdurchlauf eines Scenarios mit seinen Modulen betrachtet. Fehler und Warnungen werden neben alle Logeinträge, die nicht einen Erfolgsstatus beschreiben, mit ihren Fehlerbilder und -diagnose ausgegeben. Die benutzte Testmaschine (SUT - System Under Test) wird mit ihren wichtigen Parametern additiv beschrieben.
Level 4: Testmodul-Detail
Es wird EIN Modul (Sammlung aller Testfälle zu einem Testobjekt) innerhalb des Testruns eines Scenarios betrachtet. Es werden alle relevanten Loginformationen mit ihren zugehörigen Screenshoots dargestellt. Die benutzte Testmaschine wird ebenfalls dokumentiert.
Project Report Overview
Komplettbetrachtung des jeweiligen Projektes - kann via PDF oder XLS generiert werden.
Auszug Projekt-Reports via PDF
Detail Report mit Fehlerbilder
Error- oder Warning-Report: Auf Skiptbasis wird der Report erzeugt und liefert im Testcase-Level Fehlerbilder und -text, wird dann im TA Studio bewertet und kann via Ticketsystem o.ä. verteilt werden.
Auszug aus dem generierten Script-Usecase Report
Results Errors & Warnings
Übersicht der Errors & Warnings der Gesamten Testläufe
In dieser Schnell-Übersicht werden alle Errors und Warnings der Testläufe chronologisch und durch Filtereinstellungen selektiert angezeigt.
Der tägliche, zentrale Einstieg in der Testautomation und dem Testlabor: Errors & Warnings in Projekten und Scenario je Testrun.
KIG-Analyse- und -Reporthierachien
Mehrstufige logische KIG-Objektstrukturen als Ordnungsprinzip
Alle Reports betrachten in verschiedener Granularität einen Testrun, mehrere Testruns oder ein Fragment eines Testruns. Wichtigste Information ist immer das Ergebnis eines Testruns auf unterschiedlicher Ebene. Loginformationen werden bei Detail-Reports verwendet. Die Reports beschreiben auf ihrem Level die Informationen die analog in der GUI auf diesem Level dargestellt werden. Auf jeden Level sind die zugehörigen Reports verfügbar.