Временное сглаживание: накапливать детали, не доверяя недостоверной истории

Накапливайте выборки во времени

Временное сглаживание, или TAA, объединяет текущие выборки с информацией, накопленной в предыдущих кадрах. Изменение субпиксельных позиций выборки позволяет выявить детали, которые пропускает одна фиксированная выборка. Главная задача — решить, какие старые выборки ещё описывают текущее изображение. Исследовательский обзор разделяет этот процесс на накопление выборок и проверку истории. [1]

Джиттер, движение и достоверность

Джиттер проекции или области вывода сдвигает шаблон выборки на субпиксельные величины. Векторы движения находят соответствующие выборки истории; сравнения глубины и цветовые границы окрестности помогают отбрасывать или ограничивать несовместимую историю. У вновь открытого фона нет достоверной видимой истории в этой позиции. Реализация Intel иллюстрирует эти механизмы. [3]

Одного движения камеры недостаточно для движущихся или деформируемых мешей. Проверьте направление векторов, единицы, ориентацию координат, а также включает ли генератор джиттер и ожидает ли его потребитель. Реализация Playdead явно требует информации о движении отдельных движущихся мешей. [2]

Расчётный пример: правильное смешивание может сохранять ошибку

Рассмотрим иллюстративный скалярный фильтр: C = 0.1 * current + 0.9 * history. Изначально история равна 0. Вновь открытая белая поверхность имеет текущее значение 1, но предположим, что фильтр ошибочно сохраняет старую историю и не выполняет отбрасывание или ограничение.

После первого обновления результат равен 0.1, после второго — 0.19. Через 10 обновлений он составляет примерно 0.651: остаётся около 34.9% первоначального расхождения. Эти вычисленные значения показывают сохранение ошибки, а не результаты бенчмарка или поведение любой реализации TAA. Правильное признание истории недостоверной при открытии поверхности может сразу устранить этот конкретный шлейф; изменение только веса смешивания обменивает длительность следа на стабильность.

Диагностируйте с контролируемым движением

Начните с фиксированной экспозиции и неподвижной камеры, направленной на тонкие края и контрастные детали. Сравните текущее изображение, репроецированную историю и результат разрешения. Затем отдельно проверьте перемещение камеры, движущийся жёсткий объект и деформируемый объект.

Изучите векторы движения и доверие к истории около силуэтов. Переместите перекрывающий объект, открывая яркий фон, и выполните резкую смену камеры для проверки сброса истории. Отличайте неверную репроекцию от правильно найденной истории, которая уже не подходит. Добавляйте прозрачные слои и изменяющееся освещение только после отладки этих случаев. Сохраняйте записи движущихся последовательностей: неподвижный снимок может скрыть шлейф.

Сбалансируйте стабильность и отзывчивость

Более агрессивное отбрасывание истории уменьшает сохранение следов, но может вернуть мерцание и шум; более жёсткое цветовое ограничение способно удалить настоящие детали. Движение поверхности также не описывает каждый перемещающийся блик или перекрывающийся прозрачный слой. Повышение резкости может улучшить воспринимаемую чёткость, но не исправляет неверное соответствие. Оценивайте качество движущегося изображения и стоимость разрешения вместе на характерном содержимом, а не выбирайте один универсальный вес истории.

Источники

• [1] A Survey of Temporal Antialiasing Techniques — Lei Yang, Shiqiu Liu and Marco Salvi, Computer Graphics Forum.
• [2] Temporal Reprojection Anti-Aliasing — Lasse Jon Fuglsang Pedersen and Playdead.
• [3] Intel Graphics Optimized TAA — Intel, GameTechDev original implementation.