L’application Nvidia Broadcast essaie de simuler un contact visuel avec la caméra

Nvidia Broadcast app tries to simulate eye contact with the camera

Pourquoi c’est important : Avec une mise à jour de son logiciel de visioconférence, Nvidia est devenue la dernière entreprise à s’attaquer au problème du contact visuel lors des appels vidéo. Ceci et d’autres fonctionnalités mineures incluses dans la mise à jour pourraient aider les créateurs de contenu à faire des présentations plus attrayantes.

Nvidia a publié Nvidia Broadcast 1.4 cette semaine avec quelques nouvelles fonctionnalités bêta pour améliorer les apparences vidéo, et l’une d’entre elles tente de résoudre un ancien problème de vidéoconférence.

La nouvelle fonctionnalité Eye Contact de la société estime et modifie le regard directionnel des yeux d’un sujet vidéo pour donner l’impression qu’il regarde la caméra. L’effet devrait permettre aux téléspectateurs de maintenir plus facilement le contact visuel avec l’orateur dans la vidéo.

Nvidia n’est pas la première entreprise à essayer de simuler le contact visuel lors d’appels vidéo ou de vidéoconférences. Apple a ajouté FaceTime Attention Correction avec iOS 13 en 2019 pour contrer l’effet qui se produit lorsque les utilisateurs regardent l’écran au lieu de la caméra pendant les appels FaceTime, ce qui ironiquement rompt le contact visuel entre les appelants. Microsoft a ajouté une fonctionnalité similaire à la Surface Pro X en 2020, qui fonctionne dans plusieurs applications d’appel vidéo comme Microsoft Teams et Skype.

Toutefois, alors qu’Apple a conçu sa correction du contact visuel en fonction des conversations à deux, la mise en œuvre de Nvidia aide les présentateurs qui peuvent lire un script lors d’un enregistrement ou d’une diffusion en continu. Elle essaie également de savoir quand rompre le contact visuel si l’orateur regarde intentionnellement au loin, en faisant une transition en douceur entre les yeux réels et simulés.

Eye Contact est encore en version bêta, cependant, car Nvidia ne l’a pas testé pour toutes les combinaisons de couleurs d’yeux et de conditions d’éclairage. La société souhaite que les utilisateurs envoient des clips vidéo pour aider le système basé sur l’IA.

L’autre grande nouveauté de Nvidia Broadcast est un effet de vignette qui permet d’améliorer les arrière-plans virtuels en simulant la profondeur de champ du bokeh. Nvidia utilise également les informations temporelles pour améliorer la façon dont son IA gère les autres effets d’arrière-plan virtuel tels que le flou, le remplacement et la suppression. Cet ajout devrait rendre les défauts visuels des arrière-plans virtuels moins perceptibles. Là encore, les commentaires vidéo des utilisateurs peuvent aider au développement.

En outre, les utilisateurs peuvent désormais mettre en miroir la caméra et faire des captures d’écran de leurs webcams. Les icônes correspondant à ces fonctions se trouvent sous le volet d’aperçu de la caméra.

En outre, Nvidia a ajouté ses nouvelles fonctionnalités à Maxine – le SDK que les développeurs peuvent utiliser pour intégrer les fonctionnalités de Nvidia Broadcast dans d’autres applications – en tant que microservices. Les développeurs peuvent également bénéficier d’un accès anticipé à une autre nouvelle fonctionnalité appelée Live Portrait.