Nvidia veut révolutionner le rendu en Temps Réel avec ses “Neural Appearance Models”

Lors du Siggraph, NVIDIA a dévoilé une avancée intéressante dans le domaine du rendu en temps réel avec l’introduction des “Neural Appearance Models”. Cette innovation utilise l’intelligence artificielle pour transformer les capacités d’ombrage, offrant une vitesse de rendu de 12 à 24 fois supérieure à celle des méthodes traditionnelles.

Cette technologie, qui succède à la compression neuronale présentée l’année dernière, permet de rendre des textures et des objets avec une précision et une complexité visuelle inégalées. La nouvelle approche intègre des matériaux issus de diverses sources. Cela peut-être des captures d’objets réels, des mesures ou encore des entités générées par des IA génératives à partir d’instructions textuelles. Elle est conçue pour s’adapter à différents niveaux de qualité allant des jeux vidéo à la réalité virtuelle en passant pas le cinéma.

Neural Appearance Models

Les modèles neuronaux de Nvidia capturent des détails extrêmement fins, tels que la poussière et les effets de lumière, tout en utilisant des réseaux neuronaux plus efficaces que les graphiques d’ombrage traditionnels. En pratique, cela signifie des performances d’ombrage considérablement accrues, permettant une exécution rapide et de haute qualité des textures, même à des définitions allant jusqu’à 16K. Il est promis une grande complexité visuelle incluant la poussière, les taches d’eau, l’éclairage et même les rayons projetés par le mélange de diverses sources de lumière et couleurs. Traditionnellement tout ceci est rendu à l’aide de graphiques d’ombrage qui sont non seulement coûteux pour du “temps réel”, mais aussi très complexes

Avec l’approche « Neural Materials », le modèle classique de rendu des matériaux est remplacé par un réseau neuronal moins coûteux et plus efficace en termes de calcul qui, selon la société, permettra de multiplier de 12 à 24 fois les performances de calcul d’ombrage.

Cette technologie s’appuie sur les architectures GPU modernes, comme celle de la série des RTX 40, exploitant les cœurs Tensor pour accélérer le processus. Nvidia a démontré le potentiel de cette avancée à l’aide d’une GeForce RTX 4090, affichant des gains de performance notables, particulièrement dans les applications DXR (Ray Tracing).

L’introduction des “Neural Appearance Models“ promet sur le papier de transformer le paysage du développement de jeux et des applications, en facilitant la création de contenus ultra-réalistes tout en maintenant des performances élevées sur les matériels les plus récents.

Source : Nvidia