NVIDIA a la solution ultime pour les vidéos floues et pixélisées

L'une des nouveautés que l'équipe de Jen Sen Huang a présenté avec leur RTX 40 est NVIDIA Vidéo Super résolution . Une fonctionnalité qui permet d'avoir les mêmes avantages que le DLSS, mais pour la lecture vidéo. En quoi consiste-t-il et quelles implications a-t-il pour l'avenir ?

Pour être honnête, nous avons toujours trouvé étrange que NVIDIA n'ait pas sonné sur l'intelligence artificielle dans la lecture vidéo. Surtout parce que des choses comme l'interpolation d'images et les algorithmes de super-résolution sont plus faciles à faire que dans les jeux vidéo. D'autant plus que le ou les référentiels existent déjà.

NVIDIA a la solution ultime pour les vidéos floues et pixélisées

À ce stade, un codec vidéo AI ?

Si nous regardons les choses sous un autre angle, les excellents codecs matériels vidéo de NVIDIA, appelés NVENC et NVDEC, sont depuis longtemps une référence sur le marché en raison de leur qualité et de leurs performances. S'ils ont dominé le marché du streaming, c'est grâce à cela et au fait que leur rival, AMD, n'avaient pas fait leurs devoirs, du moins jusqu'à la sortie du RX 7000.

Cependant, se faire confiance a ses problèmes et à la fois les améliorations des nouvelles Radeon et les excellentes performances des Intel ARC à cet égard signifie que NVIDIA doit sortir le lapin de son chapeau pour continuer sa domination dans le monde de la lecture vidéo. vidéo et streaming.

Et qu'est-ce qui les différencie ? Eh bien, un engagement fort dans le Deep Learning depuis des années, au point qu'aujourd'hui les GeForce ne sont plus des produits gaming, mais des cartes conçues pour l'IA avec la capacité de reproduire des graphismes. Il est donc normal qu'il ait décidé de renforcer le domaine de la lecture vidéo en utilisant ces avancées.

Super résolution vidéo NVIDIA

Qu'est-ce que la super résolution vidéo NVIDIA ?

La marque verte a révélé que dans un futur pilote elle activerait cette fonction sur ses cartes graphiques RTX, qui repose sur les mêmes principes que le DLSS mais pour la lecture et l'encodage vidéo. Et cela est très utile, puisque cela vous permettra de lire de la vidéo, par exemple en 4K à partir du fichier Full HD. Ce qui signifie que moins de bande passante sera nécessaire et nous pourrons également augmenter la résolution des vidéos sur Internet à une densité de pixels supérieure à son maximum actuel.

Dans tous les cas, nous ne savons pas s'il existe une limite de résolution dans laquelle l'algorithme peut effectuer la reconstruction, car dans ces cas, un volume spécifique d'informations est toujours nécessaire pour obtenir de bons résultats. N'oublions pas que la reconstruction faite avec NVIDIA Video Super Resolution est toujours une prédiction faite à partir d'un algorithme d'inférence et si l'information n'est pas suffisante dans la vidéo de base, le résultat sera inexact.

Plus précisément, NVIDIA affirme que son VRS peut mettre à l'échelle des vidéos qui commencent à l'origine à partir de résolutions 360p jusqu'à 1440p. Ce qui veut dire qu'on pourra voir une bonne partie du catalogue de vidéos sur des plateformes comme YouTube, Dailymotion et autres qui ont été téléchargés il y a longtemps avec une qualité améliorée.

Au cours de ce mois de février, une mise à jour du Chrome et Edge des navigateurs devraient apparaître qui vous permettent d'utiliser cette fonction tout en naviguant sur le Web pour regarder des vidéos à l'aide de cette fonctionnalité des cartes NVIDIA RTX.

Approchez-vous de la fin des codecs vidéo matériels ?

Il faut partir du fait que NVENC et NVDEC sont des accélérateurs, dans le sens où ils libèrent le GPU cœurs d'avoir à effectuer la tâche d'encodage et de décodage vidéo. Le problème est que depuis un certain temps, des algorithmes comme celui dont nous parlons apparaissent, ainsi que ceux de transcodage qui sont conçus pour fonctionner sur les cœurs GPU plutôt que sur des unités spécialisées et finissent par avoir des performances plus élevées.

L'avantage d'utiliser des codecs vidéo matériels ? Le fait que leur intégration coûte quelques centimes par puce et consomme très peu. Le désavantage? Ils sont certainement limités dans ce qu'ils peuvent faire et deviennent un facteur limitant. Ainsi, même si nous ne les verrons pas disparaître, il est possible qu'à un moment donné, ils continuent à être inclus pour maintenir la compatibilité, à la fois NVENC et NVDEC, mais ne soyez pas surpris que NVIDIA Video Super Resolution soit le premier des changements dans ce sens. .