====== LU01d - Aufbau eines Testprotokolls ======
**Auf einen Blick**\\
Ein Testprotokoll hält die Ergebnisse **eines** Testdurchlaufs fest: wer wann welche Programmversion getestet hat, was bei jedem Testfall tatsächlich passiert ist (IST) und was als Nächstes zu tun ist.
===== Lernziele =====
Sie können
* ein vollständiges Testprotokoll erstellen,
* Ergebnisse mit OK, Haupt- und Nebenfehler bewerten,
* Bemerkungen sachlich und hilfreich formulieren,
* ein begründetes Fazit ziehen.
===== Wozu ein Testprotokoll? =====
* **Nachweis:** Es belegt, dass und wie getestet wurde.
* **Fehlerbericht:** Die Entwicklerin sieht, welche Testfälle fehlgeschlagen sind und unter welchen Umständen.
* **Vergleich:** Nach einer Korrektur wird ein **neues** Protokoll erstellt. So sieht man, ob die Fehler behoben sind und ob neue dazugekommen sind.
Ein Testprotokoll gehört immer zu genau **einem** Testdurchlauf und **einer** Programmversion. Wird das Programm geändert, gibt es einen neuen Testdurchlauf mit allen Testfällen und ein neues Protokoll.
===== Bestandteile =====
==== Kopf ====
* Name und Version des getesteten Programms
* Datum und Uhrzeit des Testdurchlaufs
* Name der Person, die getestet hat
* Testumgebung, zum Beispiel Betriebssystem, Browser, Python-Version
* Verweis auf die Testfälle, die verwendet wurden
==== Ergebnisse ====
Für jeden Testfall eine Zeile mit
* Nummer des Testfalls
* tatsächlichem Ergebnis (IST)
* Bewertung
* Bemerkung
==== Fazit ====
Zusammenfassung und Empfehlung, wie es weitergeht.
===== Beispiel =====
^ Programm | Dreiecksseite berechnen ^ Version | 1.2 |
^ Datum, Uhrzeit | 15.10.2024, 15:00 ^ Getestet von | Marcel Suter |
^ Testumgebung | Windows 11, Python 3.12 ^ Testfälle | LU01c, Nr. 1–4 |
^ Nr ^ Erwartetes Ergebnis (SOLL) ^ Tatsächliches Ergebnis (IST) ^ Bewertung ^ Bemerkung ^
| 1 | Seite c: 5 | Seite c: 5.00 | N | Ausgabe mit zwei Nachkommastellen |
| 2 | Seite a: 3 | Seite a: 2.9998 | H | Ergebnis ungenau |
| 3 | Eine der Seiten hat die Länge 0: Berechnung nicht möglich | Programmabsturz | H | Absturz auch bei Seite b = 0 |
| 4 | Alle drei Seiten angegeben: Berechnung nicht möglich | wie erwartet | OK | |
^ Fazit | 1 Testfall OK, 1 Nebenfehler, 2 Hauptfehler. Das Programm berechnet die Seite a ungenau und stürzt bei der Seitenlänge 0 ab. Es muss überarbeitet und erneut vollständig getestet werden. |
Die Spalte «Erwartetes Ergebnis» ist optional, weil sie bereits in den Testfällen steht. Sie macht das Protokoll aber leichter lesbar.
===== Bewertung =====
^ Kürzel ^ Bedeutung ^ Erklärung ^ Beispiel ^
| **OK** | Korrekt | IST entspricht dem SOLL. | |
| **H** | Hauptfehler | Das Programm arbeitet falsch. Der Fehler muss behoben werden. | Falsches Resultat, Absturz |
| **N** | Nebenfehler | Das Programm arbeitet richtig, aber die Darstellung oder ein Text ist fehlerhaft. Der Fehler sollte behoben werden. | Tippfehler, falsche Anzahl Nachkommastellen |
Kann ein Testfall nicht durchgeführt werden, zum Beispiel weil das Programm vorher abstürzt, wird das ebenfalls festgehalten: Bewertung **H**, Bemerkung «nicht durchführbar, weil ...».
===== Bemerkungen formulieren =====
Die Bemerkung hilft der Entwicklerin, den Fehler zu finden. Besonders wertvoll sind Hinweise, **wann** ein Fehler auftritt und wann nicht.
^ Hilfreich ^ Wenig hilfreich ^
| Rundungsfehler tritt nur bei Seitenlängen über 50 auf. | Rechnet falsch. |
| Fehlermeldung erscheint, verschwindet nach Korrektur aber nicht. | Fehlermeldung komisch. |
| Absturz auch bei Seite b = 0, nicht aber bei Seite b = 0.1. | Stürzt manchmal ab. |
Die Bemerkung beschreibt, was beobachtet wurde. Sie enthält keine Vermutung über die Ursache und keinen Lösungsvorschlag (siehe [[.:grundlagen#psychologie_des_testens|Psychologie des Testens]]).
===== Fazit =====
Das Fazit fasst die Ergebnisse in Zahlen zusammen und gibt eine Empfehlung:
^ Situation ^ Empfehlung ^
| Alle Testfälle OK | Das Programm kann freigegeben werden. |
| Nur Nebenfehler | Das Programm kann korrigiert werden. Ein erneuter Test ist nicht zwingend. |
| Mindestens ein Hauptfehler | Das Programm muss überarbeitet und erneut vollständig getestet werden. |
===== Kontrollfragen =====
- Warum erstellt man nach einer Korrektur ein neues Protokoll, statt das alte zu ergänzen?
- Ein Button ist mit «Brechnen» beschriftet. Ist das ein Haupt- oder ein Nebenfehler?
- Wozu gehört die Testumgebung in den Protokollkopf?
- Verbessern Sie die Bemerkung «geht nicht».
----
{{tag>M450-LU01}}
[[https://creativecommons.org/licenses/by-nc-sa/4.0/|{{https://i.creativecommons.org/l/by-nc-sa/4.0/88x31.png}}]] Marcel Suter