Metriken für das Testreporting

Metriken werden dafür eingesetzt, um das Reporting des Projektfortschritts zu erleichtern. Sie werden zur Kontrolle und Prognose in Entwicklungsprojekten eingesetzt und erleichtern das Verständnis für komplexe Zusammenhänge.

Metriken lassen sich nach mehreren Klassifizierungen in unterschiedliche Kategorien unterteilen.

Vor allem für Messungen in der Softwareentwicklung, aus denen sich Testmetriken ableiten lassen, werden mit Hilfe von Komplexitätsmaßen Metriken definiert, die den Aufbau und die Struktur von Programmen im Detail analysieren und daraus geeignete Maßzahlen ableiten.

Mehrere Standards und Normen regeln effiziente und allgemein gültige Grundlagen für Messungen. Sie bilden auch die Basis für Testmetriken.

Für die grafische Darstellung zur Präsentation von Metriken sind, je nach thematischer Ausrichtung und Inhalt des Berichtsobjekts, unterschiedliche Formen der Darstellung sinnvoll. Es ist beim Testreporting entscheidend, den entsprechenden Sachverhalt mit der am besten geeigneten Präsentationsform abzubilden.

Metriken werden aus unterschiedlichen Gründen verwendet. Der Umfang und das Einsatzgebiet von Metriken im Software- und Systemengineering und dabei speziell beim Test werden durch den Trend zur Software-Industrialisierung verstärkt.

Zur Kontrolle der Software-Entwicklung und Softwarequalität werden geeignete Werte erhoben und in Metriken verdichtet. Sie deuten auch darauf hin, wie die Testaktivitäten beschaffen sein müssen.

Metriken für die Softwarequalität bewerten und gewichten unterschiedliche Kriterien. Dazu existieren mehrere wissenschaftliche Ansätze und Parameter.

Tests müssen die Erfüllung messbarer Anforderungskriterien nachweisen. Dabei ist die Traceability der Anforderungen nach definierten Kriterien mit geeigneten Testmethoden einwandfrei nachzuweisen.

Bei der Aufwandsschätzung werden die voraussichtliche Zeit und die Kosten, die der Test verursacht, ermittelt. Dieses Verfahren erlaubt, die Testkosten verschiedener Projekte miteinander zu vergleichen.

Die Vor- und Nachbereitung der Testdurchführung kostet Zeit und Ressourcen. Zur Fortschrittskontrolle dienen unterschiedliche Metriken.

Für eine möglichst genaue Testplanung lassen sich Vorhersagen über die Softwarequalität treffen und eventuell erforderliche Korrekturmaßnahmen im Vorfeld einleiten.

Je nach Teststufe sind unterschiedliche Arten von Metriken sinnvoll. Eine Vereinheitlichung der verwendeten Basisinformationen verhilft zu konsistenten Daten und Berichten.

Verschiedene Maße messen die Testüberdeckung, so dass sich das Entwicklungsrisiko quantifizieren lässt. Dafür existieren mehrere Kennzahlen, die für die Projektarbeit sinnvoll sind.

Testfallbasierte Metriken bewerten Status und Qualität der einzelnen Testfälle, aus denen sich Aussagen über das voraussichtliche Testvolumen und die Dauer der Testaktivitäten ableiten lassen. Dazu existieren mehrere Kennzahlen, die miteinander in Relation gesetzt werden müssen.

Testobjektbasierte Metriken messen die Testabdeckung und erlauben dadurch eine Einschätzung der Testrisiken. Codeabdeckung, Dialogabdeckung, abgedeckte Installationsvarianten und Plattformen werden dabei berücksichtigt.

Der Fortschritt der Testdurchführung wird mit Hilfe von Metriken bewertet. Daraus gewinnt man Daten über die Auslastung der Tester, kann die voraussichtliche Testdauer ermitteln und die Prognose über mögliche Liefertermine seriös absichern.

Metriken für Performance- und Lasttests bewerten das Antwortverhalten und die Einsatzfähigkeit der Software im Echtbetrieb und mit zahlreichen auf das System parallel zugreifenden Anwendern.

Für eine Erhöhung der Testeffizienz eignen sich Maßnahmen der Testautomatisierung. Metriken zur Testautomatisierung bewerten den Fortschritt bei den dafür notwendigen Aktivitäten.

Kostenbasierte Metriken bewerten Testaktivitäten mit betriebswirtschaftlichen Daten und machen dadurch Probleme im Testprozess plastisch evident. Für kostenbasierte Testmetriken ist der Testaufwand zu schätzen. Dazu existieren unterschiedliche mögliche Bewertungsansätze.

Metriken zur Testproduktivität bewerten die Effizienz von Testprozessen. In der Verbesserung von Testprozessen liegt häufig ein großes und häufig nur unzureichend betrachtetes Optimierungspotenzial verborgen.

Die Goal Question Metric ist eine systematische Vorgehensweise zur Erstellung spezifischer Qualitätsmodelle im Bereich der Softwareentwicklung. Die Goal Question Metric definiert Qualitätsmerkmale und empfiehlt dabei den Einsatz der dafür am besten geeigneten Metriken.

Testaktivitäten sollen Fehler des Testobjekts aufdecken. Fehlerbasierte Testmetriken analysieren unterschiedliche Parameter zu Fehlern im Detail, erheben dazu geeignete Werte und ermöglichen Prognosen zum Fehlerabbau. Daraus lassen sich Aussagen zur nötigen Projektorganisation ableiten.

Der Workflow und der Zustand der Dokumente, die in Zusammenhang mit Testaktivitäten zu erstellen und auszuliefern sind, können mit geeigneten Metriken verfolgt und nachgewiesen werden.

Metriken für Usability-Tests bewerten die Benutzerfreundlichkeit von Systemen. Eine bessere Usability ist von großer Bedeutung für den erfolgreichen Produktiveinsatz einer Software oder Web-Applikation.

Das TPI-Modell ist ein Leitfaden, mit dem Entwicklerteams den Reifegrad ihrer Testprozesse bewerten können und konkrete Vorschläge zur zielgerichteten Optimierung bestimmter Kernbereiche erhalten können.

Mit Hilfe von Metriken für Testendekriterien kann man Restfehler in einer Anwendung aufzeigen und daraus ableiten, wann man am besten mit dem Testen aufhören soll.

Beim Testreporting werden Metriken zur Verdeutlichung von Sachverhalten einbezogen. Für ein erfolgreiches Testreporting sind dabei einige Punkte zu beachten.

Durch den Vergleich von Testmetriken unterschiedlicher Projekte gewinnt man zusätzliche fundierte Informationen über Stärken und Schwächen der eigenen Organisation und kann erfolgreiche Ansätze im eigenen Unternehmen etablieren. Dabei sollten die Vorzüge von Big Data genutzt werden.

Bei der Anwendung von Testmetriken sind einige Punkte zu beachten, um sie zur Steuerung von Softwareprojekten effizient, zielgerichtet und erfolgreich einzusetzen.

Die psychologische Wirkung der Botschaften beim Testreporting ist zu bedenken. Bestimmte grafische Verläufe von den Werten in Metriken lösen unterschiedliche Reaktionen beim Empfänger der Testberichte aus.