DLSS 5 приносит разработчикам игр 3D-направленный нейронный рендеринг

DLSS 5 представляет 3D-Guided Neural Rendering — новый финальный этап, который расширяет графический конвейер проходом нейронного рендеринга. За основу берётся отрендеренный движком кадр — вместе с созданными художниками геометрией, текстурами и буферами освещения — и эта основа остаётся незыблемой. Кадр от движка задаёт то, что должно сохраниться, а разработчики решают, что можно менять. По цвету кадра и векторам движения модель добавляет живое освещение и детализацию материалов, не трогая при этом структуру сцены, индивидуальность персонажей и художественный замысел.

Созданный специально для рендеринга 3D в реальном времени, DLSS 5 даёт детерминированный, стабильный во времени результат. Он работает по строгой схеме «кадр на входе — кадр на выходе», используя векторы движения игрового движка, поэтому картинка остаётся согласованной при движении игрока. Компактная специализированная модель выполняется локально на одной видеокарте GeForce RTX 50 Series в разрешении вплоть до 4K.

DLSS 5 уже доступен в NBA 2K27 — игре студии Visual Concepts, изданной 2K, — на всех настольных и ноутбучных видеокартах GeForce RTX 50 Series. Подписчики GeForce NOW Ultimate тоже могут оценить технологию, играя в облаке на серверах NVIDIA с видеокартами GeForce RTX 5080. Visual Concepts применяет общие регулировки тона и стиля, а также маску попиксельного усиления, чтобы точно настраивать детализацию персонажей, сохраняя при этом их узнаваемость. В NBA 2K27 DLSS 5 сохраняет отсканированную геометрию лиц, одновременно улучшая подповерхностное рассеивание кожи, прохождение света сквозь волосы и уши, а также контактные тени.

Помимо DLSS 5, анонс затрагивает обновления NVIDIA ACE и RTX Kit. NVIDIA ACE расширяет речевой конвейер и фреймворк инференса для создания разговорных персонажей в играх, а SDK NVIDIA In-Game Inferencing (NVIGI) обеспечивает внутрипроцессное выполнение на C++ для развёртывания локальных ИИ-моделей рядом с игровой графикой. RTX Mega Geometry SDK обновили до версии 2.0, добавив поддержку потоковой передачи непрерывных кластеров уровней детализации для высокоплотных мешей — это показано в только что выпущенной текстурированной glTF-версии Zorah. RTX Mega Geometry скоро появится в Gears of War: E-Day.