Vous voudrez peut-être commencer à traiter votre navigateur web comme si vous étiez toujours au travail, surtout si vous souhaitez utiliser la nouvelle fonctionnalité Copilot Vision de Microsoft. Cette fonctionnalité, intégrée nativement dans Microsoft Edge, est capable de « voir ce que vous voyez et d’entendre ce que vous entendez » pendant que vous naviguez sur Internet, selon Yusuf Mehdi, Vice-Président Exécutif de Microsoft.
Toute cette observation par l’IA n’est pas sans raison. Copilot Vision examine ce que vous faites en ligne pour répondre à des questions, fournir des recommandations et résumer du contenu. Par exemple, elle peut fonctionner avec la nouvelle fonctionnalité Copilot Voice. Microsoft a démontré les capacités de cette dernière sur Rotten Tomatoes, montrant un utilisateur discutant avec Copilot tout en parcourant le site à la recherche de recommandations de films. En fin de compte, Copilot a retenu une comédie australienne pour l’utilisateur australien, expliquant son choix par le fait que « eh bien, vous êtes australien. » On peut dire que cela prend en compte le contexte personnel.
Il est compréhensible que l’idée d’une IA surveillant tout ce que vous faites en ligne puisse déranger certaines personnes. Microsoft indique que cette fonctionnalité est seulement sur opt-in, ce qui signifie que vous devez l’activer manuellement, et qu’il y aura un indicateur à l’écran montrant que Copilot observe vos actions. Microsoft précise également que les données de votre session sont supprimées après la fermeture de celle-ci, et qu’elles ne seront pas utilisées pour l’entraînement.
De plus, Microsoft précise que Copilot Vision ne fonctionnera d’abord qu’avec un nombre limité de sites web. Nous n’avons pas encore la liste complète, mais la fonctionnalité ne fonctionnera pas sur des contenus « payants ou sensibles ». Microsoft souligne également que la fonctionnalité ne traite rien sur une page web : elle ne fait qu’analyser le texte et les images affichés.
Copilot Voice fonctionne en conjonction avec Copilot Vision, mais peut également fonctionner de manière autonome. Sur ordinateurs et appareils mobiles, Microsoft affirme que vous pourrez désormais tenir une conversation avec Copilot uniquement par la voix.
S’appuyant sur les nouvelles capacités vocales, Microsoft lance Copilot Daily. C’est presque comme une émission de nouvelles personnalisée, rassemblant des histoires et fournissant des détails quotidiens tels que le trafic et la météo. Cela est également généré avec une voix d’IA générative qui vous guide à travers votre actualité chaque jour, basée sur le contenu avec lequel vous interagissez.
Copilot Voice et Copilot Daily sont en déploiement maintenant pour les utilisateurs de Windows aux États-Unis et au Royaume-Uni. La voix est également disponible en Australie, au Canada et en Nouvelle-Zélande, mais uniquement en anglais. Microsoft prévoit de déployer cette fonctionnalité dans d’autres pays et langues prochainement.
Copilot Vision commence à être déployé « bientôt » aux États-Unis, mais uniquement pour les abonnés de Copilot Pro. Cette fonctionnalité fait partie du nouveau programme Copilot Labs de Microsoft, qui offre aux abonnés de Copilot Pro un accès anticipé aux dernières fonctionnalités d’IA de Microsoft encore en phase de test.