Extended Cut : NVIDIA étend Maxine pour le montage vidéo et présente la recherche sur les conférences virtuelles 3D

Les professionnels, les équipes, les créateurs et autres peuvent exploiter la puissance de l'IA pour créer des effets audio et vidéo de haute qualité, même à l'aide de microphones et de webcams standards, avec l'aide de NVIDIA Maxine.

La suite de kits de développement logiciel accélérés par GPU et de microservices cloud natifs permet aux utilisateurs de déployer des fonctionnalités d'IA qui améliorent les effets audio, vidéo et de réalité augmentée pour les services et plates-formes de communication en temps réel. Maxine étendra également les fonctionnalités de montage vidéo, permettant aux équipes d'atteindre de nouveaux sommets en matière de communication vidéo.

De plus, une démonstration de NVIDIA Research lors de la conférence SIGGRAPH de cette semaine montre comment l'IA peut faire passer la vidéoconférence à un niveau supérieur avec des fonctionnalités 3D.

La connectivité sans fil a permis aux utilisateurs de rejoindre des réunions virtuelles depuis plus d'endroits que jamais. En règle générale, la qualité audio et vidéo est fortement affectée lorsqu'un appelant est en déplacement ou dans un endroit où la connectivité est médiocre.

Les fonctionnalités Maxine avancées en temps réel, telles que la suppression du bruit de fond, la super résolution et le contact visuel, permettent aux utilisateurs distants d'améliorer leurs expériences de communication interpersonnelle.

De plus, Maxine peut désormais être utilisé pour le montage vidéo. Les partenaires NVIDIA transforment ce flux de travail professionnel avec les mêmes fonctionnalités Maxine qui améliorent la visioconférence. L’objectif lors du montage d’une vidéo, qu’il s’agisse d’un argumentaire de vente ou d’un webinaire, est d’impliquer le public le plus large possible. Grâce à Maxine, les professionnels peuvent exploiter des fonctionnalités d'IA qui améliorent les signaux audio et vidéo.

Avec Maxine, un porte-parole peut détourner le regard de l'écran pour faire référence à des notes ou à un script tout en gardant son regard comme s'il regardait directement la caméra. Les utilisateurs peuvent également filmer des vidéos en basse résolution et améliorer la qualité ultérieurement. De plus, Maxine permet aux utilisateurs d'enregistrer des vidéos dans plusieurs langues différentes et d'exporter la vidéo en anglais.

Les fonctionnalités Maxine qui seront publiées en accès anticipé cette année incluent :

Maxine peut être déployé dans le cloud, sur site ou en périphérie, ce qui signifie qu'une communication de qualité peut être accessible depuis presque n'importe où.

De nombreux partenaires et clients bénéficient de vidéoconférences et de montage de haute qualité avec Maxine. Deux fonctionnalités de Maxine – Eye Contact et Live Portrait – sont désormais disponibles dans les versions de production sur la plate-forme logicielle NVIDIA AI Enterprise. Eye Contact simule un contact visuel direct avec la caméra en estimant et en alignant le regard de l'utilisateur avec la caméra. Et Live Portrait anime la photo du portrait d'une personne via son flux vidéo en direct.

La société de logiciels Descript vise à faire de la vidéo un élément essentiel de la boîte à outils de chaque communicateur, aux côtés des documents et des diapositives. Avec NVIDIA Maxine, les professionnels et les débutants qui utilisent Descript peuvent accéder à des fonctionnalités d'IA qui améliorent leurs flux de travail de contenu vidéo.

"Grâce à la fonctionnalité NVIDIA Maxine Eye Contact, les utilisateurs n'ont plus à se soucier de la mémorisation de scripts ou des reprises vidéo fastidieuses", a déclaré Jay LeBoeuf, responsable du développement commercial et d'entreprise chez Descript. "Ils peuvent maintenir une présence parfaite à l'écran tout en réussissant leur scénario à chaque fois."

L'application Camo de Reincubate vise à élargir l'accès à de superbes vidéos en tirant parti du matériel et des appareils que les gens possèdent déjà. Pour ce faire, il donne aux utilisateurs un plus grand contrôle sur leur image et en mettant en œuvre un pipeline de traitement puissant et efficace pour les effets et la transformation vidéo. Grâce aux technologies activées par NVIDIA Maxine, Camo peut offrir aux utilisateurs un moyen plus simple de réaliser une création vidéo incroyable.

« L'intégration de NVIDIA Maxine dans Camo n'aurait pas pu être plus simple, et cela nous a permis d'obtenir des performances élevées des GPU RTX des utilisateurs dès la sortie de la boîte », a déclaré Aidan Fitzpatrick, fondateur et PDG de Reincubate. "Avec Maxine, l'équipe a pu avancer plus vite et avec plus de confiance."

Cre8 de Quicklink est une puissante plate-forme de production vidéo permettant de créer des productions professionnelles de marque, ainsi que des événements en direct virtuels et hybrides. L'interface conviviale combine une conception intuitive avec tous les outils nécessaires pour créer, éditer et personnaliser une production d'aspect professionnel. Cre8 intègre la technologie NVIDIA Maxine pour maximiser la productivité et la qualité des productions vidéo, offrant un contrôle complet à l'opérateur.