Flaky Test
Unzuverlässiger Test
Ein Flaky Test kann ohne Code-Änderung funktionieren oder fehlschlagen. Timing, Reihenfolge, geteilter Status, Zufall oder fremde Systeme sind oft die Ursache.
Ein weiteres Beispiel
Ein Browser-Test scheitert parallel, weil zwei Worker sich ein Konto teilen. Eindeutige Fixtures und das Warten auf Events beseitigen das Rennen.
Hauptteile
- 01Code or behavior under test
- 02Observable evidence
- 03Coverage, failure, and recovery
Verwenden Sie es, wenn
Das Scheitern aufzeichnen und wiederholen. Wenn kurz blockiert, einen Verantwortlichen benennen und die Ursache beheben.
Nutze es nicht, wenn
Vermeide blinde Wiederholungen, dauerhafte Quarantäne, unbegründete Schuldzuweisungen und den Glauben, ein grüner Testlauf sei die Lösung.
In Code verwendeter Name
repetition + seed + timing/order isolation Vor dem Ausliefern
Check the environment and prepared test data (fixture). Define a result you can observe, failure and edge cases, isolation, stable inputs, useful error details, and cleanup. Set a time budget, owner, and flaky-test rule.
Outcome: Complete the task with Unzuverlässiger Test (Flaky Test). User context: Ein Browser-Test scheitert parallel, weil zwei Worker sich ein Konto teilen. Eindeutige Fixtures und das Warten auf Events beseitigen das Rennen. Validation approach: Unzuverlässiger Test (Flaky Test). Why it fits: Das Scheitern aufzeichnen und wiederholen. Wenn kurz blockiert, einen Verantwortlichen benennen und die Ursache beheben. Do not use it when: Vermeide blinde Wiederholungen, dauerhafte Quarantäne, unbegründete Schuldzuweisungen und den Glauben, ein grüner Testlauf sei die Lösung. Test requirements: Name the system and test environment. Define prepared test data, other inputs, and the result you can observe. Include failure and edge cases, allowed error, isolation, and cleanup. Test operations: Make failures easy to diagnose. Control random or changing inputs. Name an owner. Keep the test fast and simple enough for its release gate. Acceptance criteria: The test fails for the known bug and passes after the fix. It repeats in the target environment, gives useful evidence, and does not expose or change unrelated data. Evidence and limits (evidence boundary): Kein einziger offizieller Standard kontrolliert den gesamten Begriff. Seine Bedeutung kann sich zwischen Teams, Plattformen oder Frameworks ändern. Unknowns to confirm: Release gate, environment, prepared test data, allowed error, time budget, owner, and flaky-test rule.
Diese Anfrage prüfen
Review how Unzuverlässiger Test (Flaky Test) is used now. Definition: Ein Flaky Test kann ohne Code-Änderung funktionieren oder fehlschlagen. Timing, Reihenfolge, geteilter Status, Zufall oder fremde Systeme sind oft die Ursache. Release checks: Check the environment and prepared test data (fixture). Define a result you can observe, failure and edge cases, isolation, stable inputs, useful error details, and cleanup. Set a time budget, owner, and flaky-test rule. Before changing code, list the evidence, gaps, severity, and the smallest safe fix.