NVIDIA DLSS 5

Qu’est-ce que NVIDIA DLSS 5 ?

NVIDIA DLSS 5 est une technologie NVIDIA visant à améliorer la fidélité visuelle dans les jeux en temps réel grâce à un modèle de rendu neuronal basé sur l’IA. NVIDIA décrit DLSS 5 comme introduisant une approche en temps réel qui infuse les images rendues d’un éclairage et de matériaux photoréalistes.

L’objectif principal de DLSS 5, tel que présenté dans l’article, est de combler l’écart entre les contraintes du rendu de jeux en temps réel (pour des budgets d’images interactifs) et la complexité visuelle plus élevée souvent associée au rendu cinématique hors ligne. NVIDIA positionne DLSS 5 comme allant au-delà de l’upscaling axé sur les performances, pour générer des résultats visuellement plus détaillés tout en restant ancré dans le contenu 3D sous-jacent du jeu.

Fonctionnalités clés

• Modèle de rendu neuronal en temps réel pour les jeux : Utilise un modèle IA conçu pour fonctionner en temps réel lors du gameplay interactif.
• Entrées d’images incluant couleur et vecteurs de mouvement : Prend la couleur et les vecteurs de mouvement de chaque image comme entrée pour guider la génération des détails visuels.
• Éclairage et matériaux photoréalistes infusés dans la scène : Génère des détails d’éclairage et de matériaux que NVIDIA affirme ancrés au contenu 3D source.
• Objectifs de sortie déterministes et stables temporellement : NVIDIA indique que DLSS 5 produit des résultats déterministes et cohérents d’une image à l’autre.
• Modèle IA entraîné sur la sémantique des scènes et conditions d’éclairage : NVIDIA décrit un entraînement de bout en bout pour comprendre des éléments comme les personnages, cheveux, tissus et peau translucide, ainsi que des conditions d’éclairage comme frontal, contre-jour et couvert.
• Gestion d’effets de rendu complexes tout en conservant la structure de la scène : NVIDIA met en avant la diffusion sous-cutanée sur la peau, l’éclat des tissus et les interactions lumière-matériaux sur les cheveux.

Comment utiliser NVIDIA DLSS 5

DLSS 5 est conçu pour être utilisé via l’intégration par les développeurs de jeux plutôt que comme une application autonome pour les utilisateurs. En pratique, les utilisateurs activent l’option DLSS 5 (lorsqu’elle est disponible) dans les paramètres graphiques d’un jeu compatible.

Selon la description de NVIDIA, les développeurs de jeux utilisent les entrées DLSS 5 dérivées du rendu du jeu — couleur et vecteurs de mouvement par image — et configurent le flux de travail pour que les sorties IA restent ancrées au contenu 3D du jeu et à l’intention artistique.

Cas d’usage

• Joueurs dans des jeux compatibles cherchant une fidélité visuelle accrue : Quand un jeu inclut DLSS 5, les joueurs peuvent l’activer pour améliorer l’apparence de l’éclairage et des matériaux tout en maintenant l’interaction en temps réel.
• Studios visant à ajouter des détails photoréalistes sans flux de rendu hors ligne : Les développeurs peuvent utiliser un modèle de rendu neuronal IA conçu pour générer des images visuellement précises dans un budget d’images en temps réel.
• Jeux avec action rapide nécessitant une cohérence temporelle : DLSS 5 étant décrit comme stable temporellement et cohérent d’une image à l’autre, il cible les cas où la continuité du mouvement est essentielle.
• Scènes avec matériaux complexes et rendu peau/cheveux : NVIDIA met en avant la diffusion sous-cutanée, l’éclat des tissus et les interactions lumière-matériaux sur les cheveux comme cibles spécifiques pour une meilleure gestion visuelle.
• Configurations d’éclairage multiples (p. ex. frontal, contre-jour, couvert) : L’article décrit l’entraînement et le comportement dans différentes conditions d’éclairage environnemental, adaptées aux scènes variant en illumination.

FAQ

DLSS 5 est-il juste une solution d’upscaling ?
NVIDIA décrit DLSS 5 comme évoluant au-delà de l’upscaling axé sur les performances. Il utilise la couleur et les vecteurs de mouvement et se concentre sur l’infusion d’éclairage et de matériaux photoréalistes.

Quelles entrées DLSS 5 utilise-t-il par image ?
Selon l’article, DLSS 5 prend la couleur et les vecteurs de mouvement de l’image comme entrée.

DLSS 5 vise-t-il une cohérence entre les images ?
Oui. NVIDIA indique que la sortie est conçue pour être déterministe et stable temporellement, cohérente d’une image à l’autre.

Quels types de visuels NVIDIA dit-il que le modèle est entraîné à gérer ?
NVIDIA mentionne la sémantique des scènes comme les personnages, cheveux, tissus et peau translucide, et les conditions d’éclairage environnemental comme frontal, contre-jour et couvert.

Où puis-je obtenir DLSS 5 ?
L’article présente DLSS 5 dans le contexte du support des développeurs de jeux et liste des titres exemples, mais ne fournit pas d’étapes de téléchargement ou d’installation autonomes pour les utilisateurs finaux.

Alternatives

• Autres générations DLSS (par ex., DLSS 4.5) : NVIDIA compare DLSS 5 aux approches DLSS antérieures, y compris la génération de pixels basée sur l’IA de DLSS 4.5 et le dessin de moins de pixels originaux. Les options DLSS plus anciennes peuvent viser des objectifs similaires avec un comportement entrée/sortie différent.
• Approches traditionnelles de rendu en temps réel (par ex., ray/path tracing sans rendu neuronal) : Ces approches reposent sur des calculs de rendu conventionnels plutôt que sur un rendu neuronal infusé d’IA, ce qui modifie le flux de travail et les compromis performance/qualité.
• Méthodes d’upscaling d’images IA hors de la famille DLSS : L’article oppose les modèles IA vidéo hors ligne (difficiles à contrôler et potentiellement non déterministes) à l’approche déterministe et axée sur les jeux en temps réel de DLSS 5. Les upscaleurs non spécifiques aux jeux peuvent différer en stabilité temporelle et en contrôle.
• Systèmes de rendu neuronal générant des images à partir du contenu de jeu : Les alternatives de catégorie plus large incluent d’autres pipelines de rendu neuronal en temps réel, qui diffèrent généralement par les entrées utilisées (par ex., utilisation ou non des vecteurs de mouvement) et la façon d’assurer la cohérence avec une scène 3D.