Auf einen Blick
Die Testabdeckung (Coverage) misst, welcher Anteil einer Software durch die Testfälle tatsächlich geprüft wurde.
Die Codeabdeckung zählt zum Beispiel, wie viele Anweisungen, Zweige und Bedingungen bei allen Testfällen zusammen mindestens einmal ausgeführt wurden.
Sie können
Die Codeabdeckung gehört zum Glassbox-Test: Man braucht den Quellcode, um sie zu bestimmen. Sie wird vor allem bei Komponenten- und Integrationstests eingesetzt.
| Abdeckung | Frage | Berechnung |
|---|---|---|
| Funktionsabdeckung (Function Coverage) | Wurde jede Funktion mindestens einmal aufgerufen? | aufgerufene Funktionen ÷ alle Funktionen |
| Anweisungsabdeckung (Statement Coverage) | Wurde jede Anweisung mindestens einmal ausgeführt? | ausgeführte Anweisungen ÷ alle Anweisungen |
| Zweigabdeckung (Branch Coverage) | Wurde bei jeder Verzweigung jeder Weg mindestens einmal genommen? | genommene Zweige ÷ alle Zweige |
| Bedingungsabdeckung (Condition Coverage) | Hat jede (Teil-)Bedingung mindestens einmal true und einmal false ergeben? | aufgetretene Ergebnisse ÷ (2 × Anzahl Bedingungen) |
Die Arten sind von schwach nach stark geordnet: 100 % Zweigabdeckung schliesst 100 % Anweisungsabdeckung ein, aber nicht umgekehrt.
zahl = int(input('Zahl > ')) if zahl > 0: print('gültig')
zahl = int(input('Zahl > ')) if zahl > 0: print('gültig') else: print('ungültig')
Links (ohne else) | Rechts (mit else) |
|
|---|---|---|
| Anweisungsabdeckung 100 % | 1 Testfall genügt, z. B. 5: Alle Anweisungen werden ausgeführt. | 2 Testfälle, z. B. 5 und -5 |
| Zweigabdeckung 100 % | 2 Testfälle: Auch der unsichtbare Weg «Bedingung ist false, nichts passiert» ist ein Zweig. | 2 Testfälle, z. B. 5 und -5 |
Ein if ohne else hat trotzdem zwei Zweige. Gerade der fehlende else-Fall versteckt oft Fehler, zum Beispiel eine vergessene Fehlermeldung.
Besteht eine Bedingung aus mehreren Teilbedingungen, die mit and oder or verknüpft sind, betrachtet die Bedingungsabdeckung jede Teilbedingung einzeln.
zahl = int(input('Zahl > ')) if zahl > 0 and zahl < 100: print('gültig')
| Testfall | zahl > 0 | zahl < 100 | Gesamt |
|---|---|---|---|
-5 | false | (wird nicht geprüft) | false |
150 | true | false | false |
50 | true | true | true |
-5 und 150 hat jede Teilbedingung einmal true und einmal false ergeben? Nein: zahl < 100 war bei -5 gar nicht an der Reihe. Mit 150 und 50 ist zahl < 100 abgedeckt, mit -5 und 50 ist zahl > 0 abgedeckt. Alle drei Testfälle zusammen erreichen 100 %.false/false ist hier aber unmöglich, weil keine Zahl gleichzeitig kleiner gleich 0 und grösser gleich 100 ist. Solche unmöglichen Kombinationen zählen nicht.
Kurzschlussauswertung: Python wertet and und or von links nach rechts aus und hört auf, sobald das Ergebnis feststeht. Ist bei and der linke Teil false, wird der rechte gar nicht geprüft. Das muss man beim Zählen berücksichtigen.
def rabatt(alter, mitglied): prozent = 0 # A1 if alter < 16 or alter >= 65: # B1: alter < 16, B2: alter >= 65 prozent = 50 # A2 if mitglied: # B3 prozent = prozent + 10 # A3 return prozent # A4
Das Programm hat 4 Anweisungen (A1–A4), 4 Zweige (2 if mit je true und false) und 3 Teilbedingungen (B1–B3).
| Testfälle | Anweisungen | Zweige | Bedingungen |
|---|---|---|---|
T1: rabatt(70, True) | A1–A4: 4/4 = 100 % | if1 true, if2 true: 2/4 = 50 % | B1 false, B2 true, B3 true: 3/6 = 50 % |
T1 + T2: rabatt(30, False) | 100 % | zusätzlich if1 false, if2 false: 4/4 = 100 % | zusätzlich B2 false, B3 false: 5/6 ≈ 83 % |
T1 + T2 + T3: rabatt(10, True) | 100 % | 100 % | zusätzlich B1 true: 6/6 = 100 % |
Schon ein einziger Testfall erreicht 100 % Anweisungsabdeckung. Für die Bedingungsabdeckung braucht es drei, weil die Kinder (alter < 16) sonst nie geprüft würden.
Auch while- und for-Schleifen enthalten eine Bedingung:
true: Der Schleifenkörper wird ausgeführt.false: Die Schleife wird verlassen. Das passiert bei jeder Schleife, die endet.Für eine vollständige Abdeckung braucht es mindestens einen Testfall, bei dem der Schleifenkörper ausgeführt wird. Sinnvoll sind zusätzlich Testfälle, bei denen die Schleife gar nicht, genau einmal und mehrmals durchlaufen wird.
100 % Codeabdeckung heisst nicht, dass das Programm fehlerfrei ist.
Von Hand ist das Zählen nur bei kleinen Programmen machbar (siehe LU02.A02 - Markieren mit dem Leuchtstift).
In Python misst das Paket pytest-cov (basiert auf coverage.py) die Abdeckung automatisch:
pip install pytest-cov pytest --cov=rabatt --cov-branch --cov-report=term-missing
Der Bericht zeigt pro Datei die Anweisungs- und Zweigabdeckung und listet die Zeilen auf, die nie ausgeführt wurden.
if ohne else ein Testfall für 100 % Anweisungsabdeckung, aber nicht für 100 % Zweigabdeckung?if alter >= 18 and ausweis:? Nennen Sie konkrete Werte.