Dans une nouvelle mise à jour de leur collection Copilot AI, Microsoft est lancement une série d’améliorations devraient faciliter l’interaction avec les appareils. Parmi eux, Copilot Vision, Think Deeper et Copilot Voice sont en outre conçus pour offrir une expérience centrée sur l’utilisateur, opportune et contextuelle sur Windows, iOS, Android et Web.
Toutes ces fonctionnalités appartiennent d’une manière ou d’une autre à l’approche plus large que Microsoft adopte pour placer Copilot au milieu des activités quotidiennes des gens en allouant des solutions d’IA fusionnées avec la protection de la vie privée des utilisateurs.
Copilot Vision : Une nouvelle vision et une nouvelle approche de l’utilisation du World Wide Web
Parmi les nouvelles fonctionnalités, il y a Copilot Vision, qui permet aux utilisateurs de poser toutes sortes de questions concernant le contenu sur leur écran – qu’il s’agisse du texte ou des images d’une page Web. Par exemple, il est possible de demander une recette particulière représentée sur une photo ou des conseils en matière de mobilier lors de l’utilisation du site. Copilot Vision fonctionne ensuite de manière à analyser le contenu que les utilisateurs consomment et à répondre à l’utilisateur en temps réel, en fonction du contenu.
Accessible via Microsoft Edge en tapant « @copilot » dans la barre d’adresse, Copilot Vision est disponible dans le cadre de Copilot Labsun programme opt-in exclusif qui offre des fonctionnalités expérimentales à un groupe sélectionné d’utilisateurs. Bien que cette fonctionnalité ne soit pas entièrement révolutionnaire (la plate-forme Android de Google offre des fonctionnalités similaires), Microsoft affirme que Copilot Vision va encore plus loin en garantissant qu’aucune donnée n’est stockée ou utilisée pour entraîner des modèles d’IA.
Les copilotes compliqués de Microsoft expliqués en détail
Microsoft a tenu à souligner son engagement en faveur de la confidentialité avec cet outil. Dans un récent article de blog, la société a souligné que Copilot Vision supprime toutes les données traitées immédiatement après une conversation, sans stockage d’audio, d’images ou de texte. Cela est probablement une réponse aux préoccupations croissantes concernant l’utilisation abusive des données dans les systèmes d’IA, un point que Microsoft a pris soin de résoudre à la suite d’un examen juridique des incidents passés impliquant ses produits d’IA.
Cependant, Copilot Vision présente certaines limites. Actuellement, l’outil ne peut pas analyser le contenu des sites Web payants ou sensibles, limitant ses fonctionnalités à une liste pré-approuvée de propriétés Web. Cette restriction semble conçue pour éviter des défis juridiques similaires à celui auquel Microsoft est confronté avec le New York Times, qui accuse l’entreprise de permettre à ses outils d’IA de contourner les paywalls et d’accéder à du contenu premium.
Réfléchissez plus profondément : résoudre des problèmes complexes grâce au raisonnement de l’IA
Un autre ajout important à la suite Copilot est Think Deeper, une fonctionnalité qui exploite des modèles de raisonnement avancés pour aider les utilisateurs à naviguer dans des tâches complexes. Qu’il s’agisse de résoudre des problèmes mathématiques complexes ou de comparer plusieurs options de rénovation domiciliaire, Think Deeper est conçu pour décomposer et analyser des scénarios complexes.
Microsoft a décrit Think Deeper comme un outil qui fournit des conseils étape par étape, ce qui le rend utile à la fois pour les défis quotidiens et pour les problèmes plus spécialisés. La société a noté que la fonctionnalité est alimentée par des « modèles de raisonnement » qui mettent plus de temps à répondre, garantissant des réponses plus complètes et plus précises. Bien que Microsoft soit resté discret sur les modèles spécifiques utilisés, il s’agit probablement d’une version personnalisée du modèle o1 d’OpenAI, que Microsoft a affiné à cet effet.
Actuellement, Think Deeper n’est disponible que pour un groupe sélectionné d’utilisateurs de Copilot Labs dans des pays comme les États-Unis, le Royaume-Uni, le Canada, l’Australie et la Nouvelle-Zélande, avec des plans pour une disponibilité plus large à l’avenir.
Copilot Voice : l’IA conversationnelle à votre disposition
La dernière de la gamme de fonctionnalités d’IA de Microsoft est Copilot Voice, la possibilité d’adresser Copilot et d’émettre des commandes. Lancé d’abord aux États-Unis, au Royaume-Uni, au Canada, en Australie et en Nouvelle-Zélande, Copilot Voice étend la philosophie de Copilot avec des réponses verbalisées.
Comme la voix d’OpenAI dans ChatGPT, Copilot Voice est capable de détecter la tonalité de la voix et de répondre en conséquence. Certaines fonctionnalités de l’application la rendent encore plus engageante : par exemple, les utilisateurs peuvent mettre Copilot en pause pendant la conversation ou interrompre ses réponses au milieu de la phrase. La particularité de l’application réside dans les quatre voix synthétiques qui sont très naturelles et réalistes au toucher.
Cependant, il existe des limites quant à la capacité des utilisateurs à interagir avec Copilot Voice. Microsoft a mis en place une limite d’utilisation basée sur le temps, les abonnés Copilot Pro ayant accès à des minutes supplémentaires en fonction de la demande globale.
Personnalisation : adapter Copilot à vos préférences
En plus des mises à jour majeures des fonctionnalités, Microsoft introduit également des options de personnalisation dans Copilot. Ces paramètres permettent à l’IA d’adapter ses suggestions en fonction des interactions passées de l’utilisateur, en tirant des enseignements de l’activité d’autres applications et services Microsoft. Selon Microsoft, cela aidera Copilot à proposer des recommandations plus pertinentes et un accès plus rapide aux fonctionnalités utiles.
Cependant, le déploiement de la personnalisation prend du retard dans certaines régions. Pour l’instant, cette fonctionnalité ne sera plus disponible dans l’UE ou au Royaume-Uni, car Microsoft continue d’évaluer les options permettant de s’adapter aux lois strictes sur la protection des données dans ces régions. Il suit la stratégie mise en œuvre par de grandes entreprises informatiques comme Apple et Meta, ainsi que d’autres sociétés, lors du déploiement de solutions d’IA dans l’Union européenne.
Microsoft a exprimé que l’entreprise était impatiente de fournir une personnalisation intégrée aux utilisateurs dans ces domaines et en même temps de satisfaire aux dispositions légales telles que la loi sur les services numériques, qui réglemente l’utilisation de l’IA et la protection des données dans l’UE. Dans le passé, l’entreprise a été confrontée à certains problèmes réglementaires, en particulier dans le cadre de l’avertissement récent de l’AEE à Microsoft selon lequel elle pourrait être pénalisée pour ne pas avoir fourni suffisamment de détails sur ses produits d’IA générative.
Tout au long du déploiement de ces nouvelles fonctionnalités, Microsoft a maintenu que la confidentialité et les commentaires des utilisateurs étaient au cœur de son processus de développement. La société a souligné qu’aucune des données traitées par Copilot Vision, Think Deeper ou Copilot Voice n’est utilisée pour la formation à l’IA ou stockée au-delà de la session immédiate.
Crédit image en vedette : Microsoft
