Windows Copilot

Microsoft Vise un Contrôle Vocal de Windows avec le Nouveau Copilot IA

Software

Microsoft parie vraiment gros sur l'IA, et la prochaine version de Windows en sera truffée. L'objectif ? Vous faire abandonner votre clavier et votre souris et commencer à donner des ordres à votre PC en utilisant votre voix, comme le Capitaine Kirk commandant l'Enterprise. C'est une vision intéressante, mais je ne suis pas entièrement convaincu que tout le monde soit prêt à commencer à crier des ordres à son ordinateur.

Bientôt, Microsoft déploiera davantage de fonctionnalités et d'applications "expérimentales" axées sur son IA Copilot. Ils ont même mis une touche Copilot dédiée sur les nouveaux PC. Une fois activé, vous pourrez simplement dire "Hey, Copilot" pour commencer à interagir avec votre ordinateur. Vous vous souvenez de Cortana ? Eh bien, c'est un peu comme ça, mais en plus puissant. Je ne peux pas m'empêcher de me demander, est-ce que c'est quelque chose que les utilisateurs veulent vraiment ?

Copilot Vision, qui était déjà disponible dans Edge, s'étend maintenant à tout l'écosystème Windows. Cela signifie que la reconnaissance d'image par l'IA arrive, permettant à Copilot de comprendre ce qui se trouve sur votre écran. Ainsi, au lieu de donner des instructions super détaillées, vous pouvez simplement dire quelque chose comme "Montre-moi comment améliorer la qualité audio de Spotify" et Copilot mettra en évidence les paramètres pertinents. Cela a le potentiel de vous éviter d'avoir à chercher des articles d'instructions.

Microsoft a fait une démonstration de Copilot Vision et, bien qu'il ait répondu rapidement aux problèmes de mathématiques et aux requêtes d'achats en ligne, il n'était pas parfait. Lorsqu'on lui a demandé d'identifier les paramètres de résolution d'image sur un compte Shopify, il a pointé vers la mauvaise zone. C'est un problème courant avec les démonstrations en direct et cela souligne les défis à relever pour que l'IA comprenne parfaitement le contexte. Je me demande à quel point cela sera fiable dans l'utilisation quotidienne.

Ce système de vision par l'IA peut également décrire des images sur votre écran. Microsoft suggère d'utiliser cela pour créer un CV à partir de votre portfolio. Un autre exemple montrait Copilot générant des idées musicales à partir d'une mélodie fredonnée. Je ne sais pas pour vous, mais la mélodie que j'ai entendue n'était pas vraiment inspirante. Les achats par l'IA reçoivent également un coup de pouce, Copilot analysant vos onglets de navigateur pour trouver des produits. Google propose des fonctionnalités similaires d'achats par l'IA, avec des options d'essayage virtuel.

Attendez-vous à voir de nouvelles publicités pour Copilot bientôt, conçues pour "enseigner" à quel point il est amusant d'utiliser votre voix avec Copilot. Au-delà de cela, il y a encore plus de fonctionnalités destinées à vous rendre accro à l'IA. Les Windows Insiders auront des fonctionnalités bêta qui intègrent Copilot plus profondément dans la barre des tâches, remplaçant potentiellement la barre de recherche régulière. Ne vous inquiétez pas, vous pouvez toujours l'utiliser pour les recherches de fichiers et de paramètres.

Microsoft affirme que les gens parlent déjà à leurs PC à des fins de dictée et d'accessibilité. Cependant, il y a une grande différence entre ces utilisations et le fait d'avoir une conversation complète avec votre ordinateur, surtout si vous avez des collègues de travail à proximité. Pour l'instant, la saisie au clavier pour Copilot Vision est limitée aux testeurs bêta.

Les testeurs bêta pourront également essayer la nouvelle application Copilot Actions, que Microsoft décrit comme un "agent d'IA" capable d'effectuer des actions dans différentes applications et fichiers. Dans le monde de l'IA, un "agent" est un ensemble de modèles d'IA travaillant ensemble. Sous Windows, cela pourrait signifier que Copilot prend le contrôle de votre PC pour exécuter des programmes et effectuer des tâches. Une autre IA d'entreprise, Claude, a montré des capacités similaires l'année dernière.

Microsoft promeut des fonctionnalités d'IA spécifiques au matériel depuis un certain temps, avec des "PC avec IA" en 2023 et des "PC Copilot+" en 2024. Maintenant, ils affirment que "chaque PC avec Windows 11" est un PC avec IA une fois connecté à l'IA basée sur le cloud de Microsoft. Il n'est pas injuste de dire que le PC avec IA "n'a pas encore vraiment pris vie". Microsoft a essayé d'introduire Recall, une fonctionnalité qui prendrait des captures d'écran de tout ce que vous faites sur votre PC et vous permettrait de les rechercher. Les chercheurs en sécurité ont découvert que cela pourrait exposer des données sensibles, c'est pourquoi Microsoft a retardé sa sortie d'un an. Même après les améliorations de sécurité, Recall n'est toujours pas parfait, et certaines entreprises l'ont bloqué en raison de préoccupations concernant la sécurité des données.

L'application Copilot Actions et d'autres fonctionnalités sont "opt-in", et l'application Actions est désactivée par défaut. Microsoft promet que vous pouvez prendre le contrôle "à tout moment" et que le programme demandera l'autorisation pour des actions spécifiques. Étant donné que ces fonctionnalités sont basées sur le cloud, vos données seront traitées sur un serveur distant. Microsoft assure aux utilisateurs qu'il ne stocke ni n'utilise abusivement vos requêtes ou le contenu de l'écran. Cependant, après le désastre de Recall, il est un peu plus difficile de faire confiance à Microsoft avec vos données. Si Microsoft veut que les gens ignorent les préoccupations concernant la confidentialité au nom de l'IA, ils doivent offrir une raison plus convaincante qu'une IA qui fredonne des mélodies sur demande.

2 Images de Windows Copilot:
imageWindows Copilot imageWindows Copilot

Source: Gizmodo