Durchführung von Testläufen

TestMonitor gruppiert Testfälle in Testläufen, die von Testern Fall für Fall abgearbeitet werden. Ein Beam-Agent überwacht einen aktiven Testlauf, liest jedes Testergebnis bei der Erfassung aus und wendet Ihre Regeln dafür an, was als blockierender Fehler gilt. Wenn ein Fall die Akzeptanzkriterien nicht erfüllt, öffnet der Agent einen verknüpften Fehler und vermerkt den Testlauf, aus dem er stammt. Bestandene Testfälle bringen den Testlauf dem Abschluss näher, ohne dass jemand eingreifen muss. Alles, was der Agent nicht mit Sicherheit klassifizieren kann, wie z. B. ein mehrdeutiges teilweises Bestehen, wird einem menschlichen Tester zur Beurteilung und zum Abschluss überlassen.

Fehlererfassung

Fehler in TestMonitor erfassen, was wo und bei welchem Testfall fehlgeschlagen ist. Durch ein fehlgeschlagenes Ergebnis oder einen eingehenden Bericht veranlasst, liest ein Beam-Agent die Fehlerdetails, prüft sie anhand Ihrer Priorisierungsregeln und erfasst oder bearbeitet einen Fehler mit der richtigen Priorität und den passenden Tags. Er verknüpft den Fehler mit dem ursprünglichen Testlauf, damit Tester den Überblick behalten. Duplikate, die eindeutig mit einem offenen Fehler übereinstimmen, erhalten einen Kommentar anstelle eines neuen Datensatzes. Berichte, die schwerwiegend erscheinen oder unbekannte Bereiche betreffen, werden an einen Tester übergeben, bevor etwas zugewiesen oder geschlossen wird.

Meilenstein- und Abdeckungs-Tracking

TestMonitor verknüpft Testfälle mit Meilensteinen und Anforderungen, damit Teams sehen können, was abgedeckt ist. Ein Beam-Agent liest den Fortschritt des Testlaufs im Vergleich zu einem Meilenstein, wendet Ihren Schwellenwert für die Betriebsbereitschaft an und postet eine Statusmeldung, wenn die Abdeckung diesen Schwellenwert überschreitet oder unterschreitet. Er kann Anforderungen ohne bestandenen Test markieren, sodass Lücken frühzeitig erkannt werden. Wenn es um das Release-Timing oder die Freigabe geht, benachrichtigt der Agent den Verantwortlichen, anstatt einen Meilenstein für erledigt zu erklären. Er überlässt diese Ermessensentscheidung und alle Fragen zum Projektumfang einem menschlichen Teamleiter, der die Entscheidung trifft.