Lorsque NVIDIA a introduit l’application de diffusion NVIDIA gratuite en 2020, il a promis d’utiliser les capacités d’IA des GPU RTX pour augmenter la qualité vidéo et le son des enregistrements des utilisateurs, en supposant qu’ils avaient le bon matériel. Cela pourrait être utile lorsque la webcam et les microphones intégrés d’un ordinateur portable peuvent ne pas capturer les images les plus belles ou l’audio le plus riche, et pourrait potentiellement aider les banderoles à se débrouiller avec une configuration moins chère. Avec la version 2.0 de l’application Nvidia Broadcast, publiée à la fin de janvier, les capacités augmentent encore plus … Peut-être un peu trop près du soleil.
Dans NVIDIA Broadcast 2.0, les microphones ont toujours des options pour l’élimination du bruit et l’élimination de l’écho de la pièce, mais il y a maintenant aussi un effet vocal de studio en bêta qui «améliore la qualité de votre micro pour simuler un studio d’enregistrement haut de gamme». Pour la vidéo, l’application peut toujours apporter des ajustements à votre arrière-plan (remplacer, se floue ou essentiellement la projection verte), retirer le bruit des images granuleuses, zoomer et vous garder automatiquement dans le cadre et étrangement, faire ressembler à vos yeux regardent la caméra. Mais nouveau avec la mise à jour est l’éclairage virtuel, pour mieux vous mettre en évidence dans votre vidéo.
Certaines de ces nouvelles fonctionnalités nécessitent des GPU puissants. La voix du studio, la suppression du bruit vidéo et la lumière virtuelle de la clé indiquent que tous les appels à un «GPU haut de gamme» et ne sont pas recommandés pour les jeux ou utilisent d’autres applications à forte intensité de GPU. Toutes les fonctionnalités nécessitent du matériel RTX, ce qui signifie que vous aurez besoin d’au moins un RTX 2060 ou plus pour les essayer, mais pour les fonctionnalités qui nécessitent un «GPU haut de gamme», NVIDIA dit qu’un RTX 4080, 5080 ou plus est «requis. » Cela dit, j’ai pu exécuter les deux fonctionnalités sur un GPU mobile RTX 4060.
Nvidia Broadcast en action
L’idée derrière ces fonctionnalités d’IA est cool, mais la façon dont ils fonctionnent réellement sont encore en question. D’une part, ils peuvent vraiment être aussi exigeants que Nvidia le dit. L’exécution de la lumière de la touche virtuelle ou de la fonction de voix de studio sur mon ordinateur portable alimenté par RTX 4060 a montré que le GPU a été absolument critiqué par le processus. Le moniteur d’utilisation du GPU intégré de NVIDIA était montré rouge, avec le RTX 4060, sauf maximisé et la superposition de performances montrant qu’il dessinait 60 watts. Les fans de mon ordinateur portable ont même augmenté comme si je jouais à Full Throttle. Donc, juste du point de vue de l’économie, ces fonctionnalités sont coûteuses, peu importe comment vous les regardez. Vous devrez avoir du matériel puissant pour les exécuter, puis exécuter ce matériel dur. Prévoyez d’utiliser ces fonctionnalités sur un ordinateur de bureau ou avec votre ordinateur portable branché.
Ensuite, il y a la question encore plus cruciale de leur apparence et du son réellement. Commençons par la vidéo.
L’outil de contact visuel, bien qu’il soit disponible avant Broadcast 2.0, est maintenant sorti de la version bêta. Mais je ne suis pas convaincu que cela aurait dû. Bien sûr, l’activer donne l’impression que je regarde l’appareil photo dans des séquences vidéo. Mais dans mes tests, cela m’a invariablement donné de grands yeux bleus qui m’ont fait ressembler à un marcheur blanc tout de suite Game of Thrones. Pour référence, je n’ai pas les yeux bleus. Même lorsque je faisais un contact visuel avec la caméra, Nvidia Broadcast a toujours insisté pour éditer mes yeux et les rendre bleus.
La lumière virtuelle de la clé a fait ce qu’elle a dit. Il a créé un éclairage artificiel pour stimuler la luminosité sur moi sans augmenter la luminosité de toute la vidéo. Cependant, les résultats n’ont pas réussi à m’impressionner. Avec cela activé, j’ai simplement l’air de devenir radioactif. L’éclairage est très contre nature.
Quant à l’audio, à première vue, cela semble assez impressionnant. Les micros sur mon ordinateur portable ne sont pas très bons. Même dans une pièce calme, ils ont sorti du son qui m’a fait paraître loin et légèrement étouffé. Avec Studio Voice activé, ma voix se retrouve beaucoup plus complète et plus claire. Mais en écoutant attentivement, il y a une étrange numérisation. C’est difficile à caractériser, mais cela ne semble pas que ce soit vraiment ma voix. Cela ressemble plus à un enregistrement de ma voix a été utilisé dans un cloner vocal, puis cela a répété tout ce que j’ai dit. Tout est juste un peu guindé et tremblant. Écoutez ci-dessous:
La fonction Studio Voice ne peut pas non plus sauver le micro d’un mauvais environnement d’enregistrement. Testant dans une petite pièce avec un ventilateur de boîte fonctionnant à plein régime, l’audio était une amélioration spectaculaire de la clarté par rapport à l’enregistrement brut des microphones, mais il était encore traité audible, et les efforts pour maîtriser le bruit de fond ont fait en sorte que ma voix sonne son particulièrement étrange.
Si vous avez un microphone à moitié décent, Studio Voice pourrait même aggraver les choses. J’ai fait des enregistrements de test supplémentaires en utilisant le micro-boom intégré sur le casque Audeze Maxwell avec lui directement câblé dans mon ordinateur portable. Dans une pièce calme et bruyante, il a fourni un enregistrement bruyant, clair et complet de ma voix sans la voix de studio activée. Dans les deux cas, l’activation de Studio Voice a ensuite introduit la numérisation difficile à manquer qui non seulement aggravé l’audio, mais a également rendu la compréhension de la compréhension plus difficile.
Nvidia AI peut-elle remplacer une configuration de streaming appropriée?
Compte tenu des exigences matérielles, des demandes de performances et de la qualité des résultats, les stars doivent vraiment s’aligner pour ces nouvelles fonctionnalités de diffusion NVIDIA pour se sentir vraiment intéressantes. Si vous avez un système alimenté par NVIDIA, jouez par tous les moyens avec l’outil. Certaines fonctionnalités peuvent être utiles, comme celle de la catégorie automatique. Mais je ne recommanderais pas de bombarder un nouveau GPU NVIDIA juste pour que vous puissiez économiser de l’argent sur l’équipement d’enregistrement audio et vidéo, surtout si vous voulez vous procurer une qualité professionnelle. Et n’oubliez pas que le tirage au sort du GPU essayant d’exécuter ces fonctionnalités s’additionnera au fil du temps.
La qualité audio que j’ai obtenue de Studio Voice – peut-être limité par le RTX 4060 dans mon système – n’était pas quelque chose que je voudrais partager avec tout type d’audience sur une base régulière, et elle pâlit par rapport à la qualité que je pouvais obtenir Juste en ayant un casque avec un micro à boom. J’ai testé beaucoup des casques de jeu, et même des casques câblés très bon marché avec un micro en boom sont mieux des ligues que ce que j’ai entendu de Studio Voice.
La fonction de contact visuel n’a été autre chose que troublante, et je ne pense pas que cela va tromper quiconque à croire que vous établissez un contact visuel avec eux. Et la lumière virtuelle, un peu comme la voix de studio, ne semble pas être un substitut de qualité à une véritable lumière clé, en particulier lorsque les lumières LED abordables sont un centime.
