Temporal Antialiasing: Details akkumulieren, ohne ungültiger History zu vertrauen

Samples über mehrere Frames akkumulieren

Temporal Antialiasing (TAA) kombiniert aktuelle Samples mit Informationen, die in früheren Frames akkumuliert wurden. Wechselnde Subpixel-Positionen der Samples können Details sichtbar machen, die ein einzelnes festes Sample verfehlt. Das zentrale Problem besteht darin zu entscheiden, welche älteren Samples das aktuelle Bild noch korrekt beschreiben. Ein Forschungsüberblick unterteilt dies in Sample-Akkumulation und History-Validierung. [1]

Jitter, Bewegung und Gültigkeit

Jitter in der Projektion oder im Viewport verschiebt das Sampling-Muster um Subpixel-Beträge. Motion Vectors lokalisieren die zugehörigen History-Samples; Tiefenvergleiche und Farbgrenzen der Nachbarschaft helfen, inkompatible History zu verwerfen oder einzuschränken. Neu aufgedeckter Hintergrund hat an dieser Stelle keine gültige sichtbare History. Die Implementierung von Intel veranschaulicht diese Mechanismen. [3]

Kamerabewegung allein genügt bei bewegten oder verformten Meshes nicht. Zu prüfen sind Richtung, Einheiten und Koordinatenorientierung der Vektoren sowie, ob der Jitter vom Erzeuger eingerechnet und vom Verbraucher erwartet wird. Die Implementierung von Playdead verlangt ausdrücklich Bewegungsinformationen für einzelne bewegte Meshes. [2]

Rechenbeispiel: Ein korrekter Blend kann einen Fehler beibehalten

Betrachtet wird ein illustrativer skalarer Filter: C = 0.1 * current + 0.9 * history. Anfangs ist die History 0. Eine neu aufgedeckte weisse Fläche hat den aktuellen Wert 1. Angenommen wird jedoch, dass der Filter fälschlich die alte History beibehält und weder Verwerfen noch Clipping anwendet.

Das Ergebnis beträgt nach dem ersten Update 0,1 und nach dem zweiten 0,19. Nach 10 Updates liegt es bei etwa 0,651: Rund 34,9 % der ursprünglichen Abweichung bleiben bestehen. Diese berechneten Werte zeigen die Persistenz des Fehlers; sie sind weder ein Benchmark noch das Verhalten jeder TAA-Implementierung. Wird die History beim Aufdecken korrekt invalidiert, verschwindet diese konkrete Spur sofort; eine Änderung allein des Blend-Gewichts tauscht Persistenz gegen Stabilität ein.

Mit kontrollierter Bewegung diagnostizieren

Zunächst mit fixer Belichtung und stillstehender Kamera dünne Kanten und kontrastreiche Details betrachten. Aktuelles Bild, reprojizierte History und aufgelöste Ausgabe vergleichen. Danach Kameraverschiebung, ein bewegtes starres Objekt und ein sich verformendes Objekt getrennt testen.

Motion Vectors und History-Konfidenz im Bereich von Silhouetten untersuchen. Einen Verdecker bewegen, sodass heller Hintergrund aufgedeckt wird, und einen Kameraschnitt durchführen, um das Zurücksetzen der History zu prüfen. Dabei unterscheiden, ob die Reprojektion falsch ist oder ob die History zwar korrekt lokalisiert, aber nicht mehr passend ist. Transparente Ebenen und animierte Beleuchtung erst hinzufügen, wenn diese Fälle funktionieren. Aufnahmen von Bewegungssequenzen aufbewahren; ein statischer Screenshot kann eine Spur verbergen.

Stabilität und Reaktionsfähigkeit abwägen

Strengeres Verwerfen von History verringert die Persistenz, kann aber Flimmern und Rauschen zurückbringen; engeres Color Clipping kann legitime Details entfernen. Zudem beschreibt die Oberflächenbewegung nicht jedes bewegte Glanzlicht und nicht jede überlappende transparente Ebene. Schärfen kann die wahrgenommene Bildschärfe verbessern, eine falsche Zuordnung aber nicht beheben. Bildqualität in Bewegung und Resolve-Kosten gemeinsam bewerten, anhand repräsentativer Inhalte statt mit einem universellen History-Gewicht.

Quellen

• [1] A Survey of Temporal Antialiasing Techniques — Lei Yang, Shiqiu Liu and Marco Salvi, Computer Graphics Forum.
• [2] Temporal Reprojection Anti-Aliasing — Lasse Jon Fuglsang Pedersen and Playdead.
• [3] Intel Graphics Optimized TAA — Intel, GameTechDev original implementation.