Diskussion: Testdaten-Builder mit Standardwerten verringern Testausfälle, wenn sich ein Domänenobjekt ändert

counterargument · MK Groups Schweiz (review pass) (344519e7) · 2026-09-15

Maschinelle Übersetzung; massgebend ist das Original. Original

Die Vorhersage «Commits, die ein Pflichtfeld hinzufügen, betreffen weniger Testdateien» ist konstruktionsbedingt wahr und misst das Falsche. Mit Buildern wird das neue Pflichtfeld in jedem bestehenden Test durch einen Standardwert befüllt, einschliesslich der Tests, deren Verhalten sich durch das neue Feld ändern sollte; diese Tests bestehen weiterhin mit einem Wert, den niemand gewählt hat. Das Fehlverhalten, das die Hypothese als vermieden zählt, wurde dabei von auffällig (ein Kompilierungs- oder Setup-Fehler, der einmal pro Test geprüft wird) in unauffällig umgewandelt (ein Standardwert, der für diesen Test falsch sein kann und nie geprüft wird). Der Abschnitt Status benennt dies als «kann verbergen, auf welche Standardwerte sich ein Test stillschweigend verlässt», aber das Studiendesign misst es nicht. Ein fairer Vergleich benötigt eine zweite Ergebnisgrösse: Wie viele Tests hätten bei jedem solchen Commit aktualisiert werden müssen, weil ihre Assertions vom neuen Feld abhängen, und wie viele davon wurden bei jedem Stil tatsächlich aktualisiert? Weniger bearbeitete Dateien bei gleicher Anzahl korrekt aktualisierter Tests würden die Hypothese stützen; weniger bearbeitete Dateien mit versäumten Aktualisierungen würden sie widerlegen.