NVIDIA DLSS 5

Что такое NVIDIA DLSS 5?

NVIDIA DLSS 5 — технология NVIDIA, направленная на повышение визуальной детализации в играх реального времени с помощью AI-нейронной модели рендеринга. NVIDIA описывает DLSS 5 как подход реального времени, который добавляет в отрисованные изображения фотореалистичный свет и материалы.

Основная цель DLSS 5, как указано в статье, — сократить разрыв между ограничениями рендеринга игр реального времени (для интерактивных бюджетов кадров) и более высокой визуальной сложностью, характерной для оффлайн-кинематографического рендеринга. NVIDIA позиционирует DLSS 5 как шаг за пределы апскейлинга, ориентированного на производительность, в сторону генерации более детализированных визуальных результатов, оставаясь привязанным к базовому 3D-контенту игры.

Ключевые особенности

• Нейронная модель рендеринга реального времени для игр: Использует AI-модель, предназначенную для работы в реальном времени в интерактивном геймплее.
• Входы кадра включают цветовые и motion-векторы: Принимает цветовые и motion-векторы каждого кадра для управления генерацией визуальных деталей.
• Фотореалистичный свет и материалы, добавленные в сцену: Генерирует детали освещения и материалов, которые, по словам NVIDIA, привязаны к исходному 3D-контенту.
• Детерминированный, временно стабильный вывод: NVIDIA заявляет, что DLSS 5 обеспечивает детерминированные и последовательные результаты от кадра к кадру.
• AI-модель, обученная на семантике сцен и условиях освещения: NVIDIA описывает обучение end-to-end для понимания элементов вроде персонажей, волос, тканей и полупрозрачной кожи, а также условий освещения — фронтального, контрового и пасмурного.
• Обработка сложных эффектов рендеринга с сохранением структуры сцены: NVIDIA особо выделяет подповерхностное рассеивание на коже, блеск ткани и взаимодействие света с материалами волос.

Как использовать NVIDIA DLSS 5

DLSS 5 предназначена для интеграции разработчиками игр, а не как самостоятельное пользовательское приложение. На практике пользователи включают опцию DLSS 5 (если доступна) в графических настройках поддерживаемой игры.

Разработчики игр, по описанию NVIDIA, используют входы DLSS 5 из рендера игры — цветовые и motion-векторы на кадр — и настраивают рабочий процесс так, чтобы AI-выводы оставались привязанными к 3D-контенту игры и замыслу художников.

Сценарии использования

• Игроки в поддерживаемых играх, ищущие более высокую визуальную детализацию: Когда игра включает DLSS 5, игроки могут включить её для улучшения вида освещения и материалов при сохранении реального времени взаимодействия.
• Студии, стремящиеся добавить фотореалистичные детали без оффлайн-рендеринга: Разработчики могут использовать AI-нейронную модель рендеринга для генерации визуально точных изображений в рамках бюджета реального времени.
• Игры с быстрым движением, требующие временной согласованности: Поскольку DLSS 5 описана как временно стабильная и согласованная по кадрам, она подходит для сценариев, где важна непрерывность движения.
• Сцены со сложными материалами и рендерингом кожи/волос: NVIDIA подчёркивает подповерхностное рассеивание, блеск ткани и взаимодействие света с волосами как цели для улучшения.
• Различные условия освещения (например, фронтальное, контровое, пасмурное): Статья описывает обучение и поведение в разных условиях окружающего освещения, что подходит для сцен с изменяющимся освещением.

FAQ

DLSS 5 — это просто решение для апскейлинга?
NVIDIA описывает DLSS 5 как эволюцию за пределы апскейлинга для производительности. Она использует цветовые и motion-векторы и фокусируется на добавлении фотореалистичного света и материалов.

Какие входы использует DLSS 5 на кадр?
Согласно статье, DLSS 5 принимает цветовые и motion-векторы кадра как вход.

Стремится ли DLSS 5 к согласованности между кадрами?
Да. NVIDIA заявляет, что вывод предназначен быть детерминированным и временно стабильным, последовательным от кадра к кадру.

Какие виды визуалов, по словам NVIDIA, обучена обрабатывать модель?
NVIDIA упоминает семантику сцен вроде персонажей, волос, тканей и полупрозрачной кожи, а также условия освещения — фронтальное, контровое и пасмурное.

Где взять DLSS 5?
Статья рассматривает DLSS 5 в контексте поддержки разработчиков игр и перечисляет примеры тайтлов, но не предоставляет шагов по самостоятельной загрузке или установке для конечных пользователей.

Альтернативы

• Другие поколения DLSS (например, DLSS 4.5): NVIDIA сравнивает DLSS 5 с предыдущими подходами DLSS, включая AI-генерацию пикселей в DLSS 4.5 и использование меньшего количества исходных пикселей. Более старые варианты DLSS могут преследовать похожие цели с иным поведением входных/выходных данных.
• Традиционные подходы к рендерингу в реальном времени (например, ray/path tracing без нейронного рендеринга): Эти подходы опираются на обычные вычисления рендеринга вместо нейронного рендеринга с AI, что меняет рабочий процесс и компромиссы производительности/качества.
• Методы AI-апскейлинга изображений вне семейства DLSS: Статья противопоставляет оффлайн AI-модели видео (которые трудно контролировать и могут быть недетерминированными) детерминированному подходу DLSS 5, ориентированному на игры в реальном времени. Универсальные апскейлеры для неигр могут отличаться по временной стабильности и контролю.
• Нейронные системы рендеринга, генерирующие изображения из игрового контента: В более широкую категорию альтернатив входят другие пайплайны нейронного рендеринга в реальном времени, обычно отличающиеся используемыми входными данными (например, использованием motion-векторов) и способом обеспечения согласованности с 3D-сценой.