Pour son 50e anniversaire, Microsoft enseigne à son chatbot de copilote à forte AI quelques nouvelles astuces.
Copilot peut désormais prendre des mesures sur «la plupart des sites Web», dit Microsoft, en le faisant entendre pour réserver des billets, des restaurants de réserve, etc. Le bot a acquis la capacité de se souvenir de choses spécifiques à votre sujet, similaire au chatppt d’Openai, comme votre nourriture et vos films préférés. Et il peut désormais analyser la vidéo en temps réel de votre téléphone, en répondant aux questions dans le contexte de ce qu’il «voit».
Les mises à niveau interviennent alors que Microsoft aurait réfléchi à une refonte de copilote, qui a toujours été alimenté par des modèles d’IA d’Openai, avec plus de sa propre technologie interne. Copilot a souvent pris du retard sur les rivaux Chatgpt et les Gémeaux de Google, qui, ces derniers mois, n’ont fait qu’augmenter le rythme des déploiements de fonctionnalités.
Vendredi, Copilot peut effectuer des tâches sur le Web dans le sens de la façon dont les outils «agentiques» comme l’opérateur d’Openai le font. Microsoft dit qu’il s’est séparé de 1-800-FLOWERS.COM, Booking.com, Expedia, Kayak, OpenTable, Priceline, TripAdvisor, Skyscanner, Viator et Vrbo pour la compatibilité du jour-E. Entrez un examen rapide, «Envoyez un bouquet à mon partenaire» – Copilot tentera de vérifier cet élément de tâche particulier de votre liste.
En prenant une page du livre de Recherch Engine Perplexity, Copilot peut également suivre les offres en ligne pour vous. Dites au bot de rechercher des baisses de prix et des ventes sur un article, et cela vous informera quand ils se produiront – et vous présenteront un lien pour acheter.
La façon dont Copilot effectue bien la fonctionnalité de diverses tâches n’est pas claire. Microsoft a donné peu de détails sur le fonctionnement de la capacité et, contrairement à certains de ses concurrents, n’a pas publié de données indiquant des domaines où Copilot pourrait lutter ou avoir besoin d’un humain pour intervenir.
Vraisemblablement, il est possible pour le site Web de bloquer Copilot aussi, juste en mesure de bloquer l’opérateur d’Openai. Une entreprise pourrait le faire si elle s’inquiète, par exemple, que moins de personnes visitant directement son application pourraient nuire à ses revenus publicitaires.
Heureusement, les autres nouvelles fonctionnalités de Copilot sont moins nébuleuses et potentiellement lourdes de controverse.
Le copilote amélioré peut générer des «podcasts» semblables aux aperçus audio dans Google’s Notebooklm. Compte tenu d’un site Web, d’une étude ou d’une autre source, Copilot créera un dialogue arrière-et-parole entre deux hôtes synthétiques. Comme pour les aperçus audio, vous pouvez interrompre les hôtes à tout moment pour poser une question, et ils le reconnaîtront et répondront.
Sur Android et iOS, Copilot peut désormais voir ce qui se trouve dans la caméra de votre téléphone ou dans votre galerie de photos, et répondre aux questions à ce sujet (par exemple, « Qu’est-ce que cette fleur étrange? »). Et sur Windows, l’application Copilot remaniée peut afficher ce qui se trouve sur l’écran de votre bureau pour rechercher, modifier les paramètres, organiser des fichiers, etc. Il se déroulera d’abord pour les membres du programme Windows Insider à partir de la semaine prochaine.
Ce journaliste espère que des garanties sont en place raisonnables pour empêcher le copilote de lire des fichiers privés ou de faire des erreurs de rupture. Mais les informations étaient difficiles à trouver avant l’heure de presse.
Ailleurs, Copilot possède une nouvelle fonction de pages consolidant le projet qui s’inspire de la forte inspiration de Chatgpt Canvas et Anthropic Claude Artefacts Tool. Les pages mettent des notes et des recherches sur une toile que Copilot peut aider à organiser et à transformer en document.
Complémentaire des pages, la nouvelle fonctionnalité de recherche en profondeur de Copilot trouve, analyse et combine des informations provenant de sources, de documents et d’images en ligne pour répondre aux requêtes plus complexes, un peu comme la recherche profonde de Chatgpt et la recherche approfondie de Gemini.
Enfin, comme mentionné précédemment, Copilot peut désormais plus sur vous. Microsoft dit que le bot notera vos préférences lorsque vous interagissez avec elle, offrant des «solutions sur mesure», des «suggestions proactives» et des rappels.
Si la perspective d’un chatbot se souvenant des détails intimes de vos conversations passées vous dérange, il existe un moyen de supprimer entièrement des «souvenirs» individuels ou opt, note Microsoft.
« Copilot (donne) que vous contrôlez via le tableau de bord de l’utilisateur et l’option de choisir les types d’informations dont il se souvient de vous ou de se désactiver entièrement », a écrit Microsoft dans un article de blog fourni à TechCrunch. « Vous restez en contrôle. »
