NVIDIA DLSS 5 donne aux artistes le contrôle total pour diriger l’image finale, une démo SIGGRAPH montre comment le rendu neuronal a résolu un grand défi pour des visuels 4K réalistes sur un seul GPU

Au SIGGRAPH, NVIDIA lève le voile sur les coulisses de DLSS 5. La firme répond aux critiques et détaille ses outils pour que les artistes gardent la main sur l’aspect final des jeux.

NVIDIA affirme que DLSS 5 n’est pas « l’IA qui remplace les graphismes » mais « l’IA qui étend les graphismes », avec davantage de contrôle pour préserver la vision des artistes

Lors du GTC 2026, NVIDIA a dévoilé DLSS 5, sa prochaine grande évolution de la suite DLSS. Les premiers comparatifs ont montré un fossé saisissant entre l’image sans et avec la technologie, grâce au Neural Rendering. Mais cette révélation a aussi déclenché une vague de critiques.

La crainte principale : voir l’IA modifier l’intention artistique originale. NVIDIA a rapidement précisé qu’il n’en était rien et que les développeurs auraient un contrôle total sur les changements apportés par DLSS 5. Certains ont même affirmé que DLSS 5 remplaçait les modèles originaux par des assets générés par l’IA, ce qui a été démenti. La réaction a toutefois surpris NVIDIA, qui est restée discrète depuis.

Au Computex, NVIDIA a présenté DLSS 4.5 Ray Reconstruction, sans un mot sur DLSS 5. Interrogés sur l’avenir de cette technologie, les représentants répondaient « restez à l’écoute ». Aujourd’hui, au SIGGRAPH, NVIDIA brise le silence et déconstruit les rumeurs autour de DLSS 5. L’entreprise détaille comment elle surmonte les défis majeurs et fournit aux développeurs des outils de premier ordre pour préserver leur direction artistique.

NVIDIA a conceptualisé DLSS 5 dès 2018 avec Turing RTX

Depuis DLSS 1, les architectures NVIDIA ont beaucoup évolué. Les Tensor Cores et les technologies neuronales ont permis à DLSS de progresser de façon décuplée. Edward Liu, directeur de la recherche appliquée en deep learning chez NVIDIA, explique que ce qui a été montré au GTC n’était qu’un aperçu. Au SIGGRAPH, l’entreprise développe davantage. Le chemin vers DLSS 5 a commencé avec Turing, les premières cartes RTX compatibles avec DLSS 1. L’idée était que graphismes et IA devaient progresser ensemble pour atteindre un jour le photoréalisme.

DLSS 5 rapproche NVIDIA de cet objectif. DLSS 4 et 4.5 avec Path Tracing ont déjà rapproché les jeux et les contenus de la réalité, mais selon NVIDIA, les graphismes ne sont pas encore indiscernables du réel. Les graphismes traditionnels sont toujours peaufinés à la main par des artistes qui créent la scène, simulent la lumière et les rebonds lumineux par la physique, puis cadrent avec une caméra. C’est le rendu moderne.

Les modèles génératifs ont vite compris le photoréalisme. Nourris d’assez de références du monde réel, ils apprennent presque tout sur l’apparence réelle : éclairage, physique, simulations. Problème : ces modèles sont lents et très complexes. NVIDIA a donc cherché un moyen de combiner rendu traditionnel et IA générative. C’est l’objectif de DLSS 5.

DLSS 5 renaît au SIGGRAPH : une approche affinée pour préserver le style artistique tout en améliorant les visuels par l’IA

On peut dire que DLSS 5 renaît au SIGGRAPH. Après la réaction initiale, NVIDIA a dû apporter des changements majeurs à la technologie. Le concept reste le même : exploiter les capacités de rendu neuronal des plateformes RTX modernes pour faire un bond dans la fidélité graphique.

DLSS 5 semble très prometteur, mais trois défis centraux devaient être relevés :

• Défi n°1 – Préserver l’intention artistique
• Défi n°2 – Streaming image par image
• Défi n°3 – 4K temps réel

Atteindre le réalisme n’est que la moitié du problème. L’autre moitié consiste à rester fidèle à la vision originale. Avec l’IA générative, c’est difficile : on peut demander quelque chose une fois, l’IA génère un asset réaliste, mais si on répète la demande, l’asset change. Prenons un portrait : l’IA générative est probabiliste, elle ne conserve pas un modèle unique ; à chaque fois, elle produit un portrait différent qui s’éloigne du contenu original.

Imaginez jouer à un jeu, activer DLSS : le visage de votre personnage devient superbe. Mais si vous désactivez et réactivez la fonction, ou si le modèle régénère le visage, l’apparence change. Ce n’est pas souhaitable pour un rendu temps réel, et cela va à l’encontre de la vision de l’artiste. NVIDIA a donc dû imposer un préconditionnement plus strict au modèle entraîné.

La solution trouvée est encore meilleure : utiliser l’image que le jeu vient de rendre. Cette image n’est ni une invite, ni une référence, ni une scène de substitution ; c’est la sortie même du moteur de rendu, disponible dans tous les moteurs. NVIDIA prend cette image rendue et la rend plus réaliste.

Le modèle DLSS 5 est entraîné pour préserver l’asset original, pas le modifier

Même cette approche a posé des défis, notamment le premier : « Préserver l’intention artistique ». NVIDIA admet avoir eu du mal au début, car chaque fois que le modèle recevait une image rendue, il la modifiait.

Pour contourner le problème, une ligne claire a été tracée : le modèle est entraîné à respecter la vision artistique. NVIDIA utilise les tampons internes du moteur de rendu (normales de surface, informations d’éclairage…) pour garantir la cohérence avec l’intention originale.

Le modèle, désormais contraint par des règles spécifiques, a trouvé des moyens d’enrichir librement « ce qui vend le réalisme ». Il améliore la diffusion sous-cutanée, les réponses des matériaux, la transmission de la lumière, les cheveux, le feuillage, les ombres de contact et l’éclairage ambiant. L’asset n’est jamais modifié, mais les aspects qui l’entourent sont améliorés pour que la scène soit une meilleure représentation de la vision originale.

Pensez à la façon dont les Shader Models ont fait évoluer les graphismes, ou comment la tessellation et le ray tracing enrichissent les visuels. DLSS 5 fait la même chose : il applique l’IA aux graphismes, il ne remplace pas les graphismes par l’IA.

DLSS 5 exploite les vecteurs de mouvement pour gérer le streaming temporel

Le deuxième défi concerne le « Streaming image par image ». La différence entre l’IA générative et le modèle DLSS 5 est que l’IA générative travaille par lots, raisonne sur plusieurs images et en produit un ensemble à la fois.

DLSS 5 opère en temps réel : impossible d’appliquer la même technique générative, car le modèle doit répondre immédiatement aux actions du joueur et rendre image par image.

La solution vient du moteur de jeu lui-même. DLSS 5 exploite les capacités natives du moteur, comme les vecteurs de mouvement, pour que le modèle n’ait pas à déduire le mouvement pixel par pixel.

Le pipeline DLSS 5 commence par le rendu, que le modèle prend en entrée, puis produit une image, et le cycle reprend. Ce processus fluide garantit une stabilité temporelle : NVIDIA assure que DLSS 5 ne souffre d’aucun scintillement, dérive ou effet de nage, contrairement aux modèles génératifs.

DLSS 5 est capable de 4K, haut taux de rafraîchissement, faible latence, et fonctionne sur un seul GPU

Le troisième et dernier défi est le « 4K temps réel ». Les modèles DLSS ont beaucoup progressé. Avec des fonctionnalités comme la Multi Frame Generation (jusqu’à 5 images générées pour chaque image rendue), la technologie rend le jeu en 4K 240 Hz+ accessible, avec le Path Tracing.

NVIDIA vise le même objectif avec DLSS 5 : du 4K à 60 FPS et plus. Le modèle DLSS 5 n’est pas comme les modèles génératifs, volumineux et lents. C’est un rendu temps réel, donc il doit être petit et efficace. NVIDIA a distillé le modèle DLSS 5 en prenant d’autres modèles qui connaissaient l’apparence du monde et en les compressant en un modèle de diffusion « one-step pixel space » beaucoup plus petit, conçu pour une seule chose : rendre le rendu temps réel plus réel.

Avec ce modèle compressé, DLSS 5 est prêt pour le 4K, les hauts taux de rafraîchissement et la faible latence. Et il y a un autre point.

Vous souvenez-vous des premières démos DLSS 5 sur une configuration double RTX 5090 ? NVIDIA avait promis que DLSS 5 fonctionnerait sur un seul GPU, et c’est toujours le cas. Le modèle tourne sur une seule carte, et surtout, il est très efficace en VRAM. Les performances finales restent à voir, NVIDIA ne communique pas encore de chiffres, mais tout viendra en temps voulu, alors que l’entreprise continue de peaufiner DLSS 5.

La boîte à outils DLSS 5 pour artistes dévoilée pour la première fois

Les défis sont donc présentés avec leurs solutions, mais cela ne couvre qu’un premier niveau de contrôle. Le second niveau est tout aussi important. Pour l’illustrer, Gav, artiste de contenu chez NVIDIA, est monté sur scène pour montrer la boîte à outils que NVIDIA mettra à disposition des développeurs et artistes. L’objectif : leur offrir plusieurs résultats possibles pour mapper entre une image rendue et une version plus réaliste.

Gav explique que DLSS 5 offre un contrôle sur tout ce qui se trouve dans la scène : personnages, éléments, accessoires, environnement. Il montre d’abord l’exemple d’un personnage avec DLSS 5 activé. La technologie conserve les assets, modèles et géométrie d’origine, mais ajoute de la diffusion sous-cutanée, un meilleur contraste, de l’occlusion ambiante et des ombres de contact, ce qui améliore les visuels du jeu. Le visage du personnage gagne en reflets, tout en respectant l’image rendue.

DLSS 5 – Plusieurs modèles au choix

DLSS 5 propose des contrôles granulaires aux développeurs. Le premier ensemble de contrôles concerne les modèles, disponibles en plusieurs variétés : modèles A, B et C, chacun produisant une sortie différente car entraînés sur des paramètres distincts.

Quand un développeur choisit un modèle, il n’est pas verrouillé. Les modèles peuvent être combinés selon les besoins.

DLSS 5 propose deux contrôles globaux : Structure Intensity et Tone Intensity. Structure Intensity module les détails haute fréquence (occlusion ambiante, diffusion sous-cutanée, reflets), tandis que Tone Intensity module les détails basse fréquence (éclairage). Les curseurs permettent de régler l’intensité de chaque aspect. Par exemple, le curseur Tone modifie les couleurs car il agit sur la diffusion sous-cutanée et l’éclairage.

Structure Intensity (côte à côte)

Tone Intensity (côte à côte)

DLSS 5 propose aussi des contrôles côté moteur et côté modèle. Le model automasking reconnaît le personnage de base. Un curseur permet d’augmenter ou diminuer l’intensité de DLSS 5 pour ce seul personnage. Ainsi, si DLSS 5 est activé ou désactivé, il ne s’applique qu’au personnage, car le modèle comprend la sémantique de la scène. À 25%, la Structure Intensity reste proche de l’image rendue ; à 95%, les développeurs obtiennent l’amélioration visuelle maximale.

L’autre contrôle concerne l’environnement ou des objets spécifiques de la scène. Ici, c’est le moteur de jeu qui fournit le contrôle, et NVIDIA masque les éléments comme la cruche, les raisins ou les bouteilles. Les développeurs sont libres de masquer comme ils le souhaitent. Cela offre une flexibilité pour améliorer ou non certains objets. Cette fois, ce ne sont pas les personnages mais ces objets qui bénéficient d’un meilleur éclairage, de translucidité, de reflets métalliques, etc.

Le dernier exemple présenté par NVIDIA concerne le feuillage, pour améliorer l’environnement plutôt que les personnages ou objets. L’image de référence utilise le ray tracing, mais NVIDIA la trouve un peu « plastique ». Avec DLSS 5, cet aspect plastique disparaît au profit de visuels réalistes. DLSS 5 se contente d’améliorer la diffusion sous-cutanée et l’éclairage sans toucher au reste.

Encore une fois, les développeurs auront la liberté de choisir l’intensité de DLSS 5. Réaliser la même scène avec des techniques de rendu traditionnelles serait très coûteux en ressources matérielles, alors que DLSS 5 utilise le rendu neuronal pour une approche plus rapide et plus fine.

Collaboration approfondie avec les développeurs et davantage de contrôles à venir

Pour conclure, NVIDIA précise que ce n’est qu’un aperçu des contrôles que DLSS 5 proposera aux développeurs. La technologie sera entièrement paramétrable, et NVIDIA travaille avec divers partenaires pour intégrer leurs retours avant le lancement, tout en développant encore plus de réglages.

Puisque DLSS 5 sera étroitement intégré au moteur de jeu, NVIDIA prévoit des collaborations encore plus poussées avec les développeurs et éditeurs, élargissant encore davantage la liste déjà immense de jeux et applications compatibles. DLSS 5 sortira cet automne, et d’autres détails suivront.

NVIDIA précise aussi qu’elle ne prétend pas avoir résolu le photoréalisme temps réel avec DLSS 5. Le vrai photoréalisme est encore loin : les animations doivent encore être améliorées au même degré que l’apparence. Il reste beaucoup à faire en matière d’approches IA pour les médias numériques. Mais les équipes Deep Learning et Graphics de NVIDIA continuent de montrer ce qu’elles savent faire de mieux : résoudre les problèmes et apporter des technologies d’avenir bien avant la concurrence.