ACTUALITÉS TECH – Bien que la technologie ne soit actuellement disponible que sur la série RTX 4000, le responsable DLSS de Nvidia n’a pas exclu d’apporter la fonction d’augmentation de la fréquence d’images à la prochaine génération.
Digital Foundry a rencontré Bryan Catanzaro, vice-président de la recherche appliquée en apprentissage profond (alias DLSS) de Nvidia, au CES. L’entretien a été réalisé après l’annonce de DLSS 4. Catanzaro a parlé des nouveaux modèles de transformateurs qui remplaceront les réseaux neuronaux convolutionnels actuels dans la technologie Super Resolution et Ray Reconstruction. La technologie est plus intelligente, peut être formée sur un ensemble de données plus vaste et peut prendre de meilleures décisions pour réduire les images fantômes et les scintillements.
Le nouveau modèle Super Resolution a une puissance de traitement quatre fois supérieure à celle de son prédécesseur. Catanzaro n’a pas précisé combien de temps de rendu supplémentaire cela nécessiterait, mais il dit que Nvidia pense que cela fonctionnera mieux sur les cartes graphiques GeForce RTX 5000 qui seront bientôt commercialisées. La technologie de génération d’images est également en cours de refonte. Ils abandonnent le modèle précédent, qui était basé sur l’accélérateur matériel Optical Flow, et utilisent à la place un nouveau modèle alimenté par l’intelligence artificielle.
“Lorsque nous avons créé DLSS 3 Frame Generation, nous avions vraiment besoin d’une accélération matérielle pour calculer le flux optique. Nous n’avions pas assez de cœurs Tensor, et nous n’avions pas d’algorithme Optical Flow suffisamment performant. Nous n’avions pas développé d’algorithme de flux optique en temps réel fonctionnant sur des cœurs Tensor qui correspondaient à notre budget de calcul. Nous disposions de l’accélérateur de flux optique que Nvidia construisait depuis des années en tant qu’évolution de notre technologie d’encodeur vidéo, et il fait également partie de notre accélération de la vision par ordinateur automobile pour les voitures autonomes.
Il était logique pour nous de l’utiliser pour DLSS 3 Frame Generation. Mais la difficulté de toute implémentation matérielle d’un algorithme comme Optical Flow est qu’il est très difficile de l’améliorer. C’est ce que c’est, et les échecs qui en découlent “Nous n’avons pas pu annuler le flux optique avec un réseau neuronal plus intelligent jusqu’à ce que nous décidions de le remplacer et d’opter pour une solution entièrement basée sur l’IA, et c’est ce que nous avons fait pour la génération d’images dans DLSS 4”, a déclaré Catanzaro.
Catanzaro a ajouté que le portage sur les cartes RTX 3000 n’est pas exclu. C’est une question d’optimisation et d’ingénierie, et si elle est mise en œuvre, l’expérience utilisateur sera importante. La technologie, appelée Multi Frame Generation, débutera sur les cartes RTX 5000 et ils verront ce qu’ils peuvent mettre en œuvre sur les générations plus anciennes. Mais en plus des exigences plus élevées imposées aux cœurs Tensor, n’oubliez pas qu’ils sont également moins performants sur l’ancienne architecture. Catanzaro a même souligné l’importance de découpler la mesure de retournement mise à jour du processeur pour réduire la variabilité du temps d’image (et ainsi améliorer le timing des images) d’un facteur cinq à dix par rapport aux conceptions précédentes. Enfin et surtout, il a affirmé que Reflex 2 (qui est également basé sur l’IA) rend le jeu bien plus agréable, et il pense que les joueurs sensibles au décalage en particulier l’adoreront.
La seule question maintenant est de savoir ce qui sera accompli en matière de prise en charge des anciennes cartes graphiques.
Source : WCCFTech
