Muse veut maintenant agir sur ce que vous regardez

La nouveauté la plus visible de Meta Connect est le passage aux lunettes IA. Meta annonce que Muse arrivera sur ses lunettes dans les prochains mois, avec un niveau d’intégration supérieur à une simple commande vocale envoyée au téléphone.

L’utilisateur pourra interpeller son agent puis lui demander d’agir à partir de ce que les caméras voient. Meta cite plusieurs exemples : un produit posé sur une étagère, une affiche, ou une longue liste de fournitures scolaires. Il ne serait alors plus nécessaire de décrire manuellement chaque élément à Muse avant de lui demander d’en faire quelque chose.

C’est là que la différence entre assistant et agent devient concrète. Reconnaître un paquet de céréales avec une caméra est déjà banal. Le reconnaître, l’ajouter à une tâche plus large, chercher où l’acheter et poursuivre l’opération après que l’utilisateur a détourné le regard est une autre catégorie d’usage.

Parler à Muse pendant qu’il continue de travailler

Meta ajoute également un mode vocal conçu pour des conversations longues. L’entreprise explique que Muse pourra poursuivre des actions en arrière-plan pendant que la discussion continue.

Ce n’est pas simplement une synthèse vocale collée à un chatbot. Muse est construit pour maintenir des tâches sur la durée : navigation web, formulaires, recherches, réservations ou suivi d’un objectif peuvent continuer même lorsque l’application n’est plus ouverte.

Le service repose sur Muse Spark et sur une machine virtuelle persistante baptisée Muse Secure VM. Chaque agent dispose de son propre environnement cloud avec navigateur, stockage et outils, plutôt que d’exécuter toutes ses opérations directement sur le téléphone.

Meta lui ouvre beaucoup plus de portes

L’autre annonce importante de Connect est la multiplication des connecteurs. Muse avait été lancé avec plusieurs dizaines de partenaires et l’accès au catalogue Shopify. Meta ajoute désormais Walmart, Best Buy, American Eagle Outfitters, DICK’S Sporting Goods, Fanatics, Gap, Michael Kors, Sephora, Ulta et Wayfair pour le commerce.

Shop Pay et PayPal rejoignent les moyens de paiement annoncés. Expedia doit arriver pour le voyage, Instacart pour les courses, tandis que Notion, Granola, GitHub et Box couvrent une partie du travail et de la productivité.

Toutes ces intégrations ne doivent pas être confondues avec une disponibilité instantanée et universelle : Meta présente plusieurs d’entre elles comme des ajouts à venir.

Muse doit même obtenir sa propre adresse email. Elle pourra servir à lui transmettre des informations, mais aussi à lui permettre d’échanger avec des services ou des personnes afin de terminer une tâche.

Le modèle de sécurité part du principe que l’agent finira par se tromper

Meta a consacré une quantité inhabituelle de documentation à l’architecture de sécurité de Muse. Le principe le plus intéressant est presque pessimiste : le système est construit en considérant qu’un agent peut faire une erreur ou être manipulé par une page web malveillante.

Le cœur de Muse fonctionne donc dans un environnement isolé. Les identifiants de connexion sont stockés séparément et le modèle principal n’est pas censé voir directement les mots de passe ou les jetons d’authentification.

Un second système, Sentinel, contrôle les actions vers l’extérieur. Pour certaines opérations sensibles — envoyer un message, transmettre une information ou effectuer un achat — l’utilisateur peut être invité à donner son accord.

Meta indique aussi que les conversations de Muse et les données présentes dans sa machine virtuelle ne sont pas envoyées aux systèmes publicitaires de Meta.

« Privé » ne signifie pas encore « inaccessible à Meta »

La nuance se trouve dans la documentation technique de Meta elle-même. La version actuelle de Muse limite l’accès interne aux données par des politiques et des protections opérationnelles, mais elle n’empêche pas techniquement Meta d’y accéder lorsque cela est nécessaire pour exploiter, sécuriser ou assister le service.

Une architecture plus stricte, Muse Confidential VM, est annoncée pour plus tard dans l’année. Meta affirme qu’elle doit utiliser une protection cryptographique permettant d’empêcher même Meta d’accéder au contenu de la machine virtuelle de l’utilisateur.

Cette version existe actuellement auprès d’un petit groupe de testeurs de confiance et doit encore passer par des audits externes avant son lancement général.

Les utilisateurs peuvent par ailleurs refuser que leurs interactions avec Muse servent à entraîner les futurs modèles de Meta. Le réglage est distinct du discours publicitaire : Meta dit ne pas envoyer directement les conversations au système de ciblage publicitaire, mais les trajectoires de l’agent peuvent par défaut contribuer à l’entraînement après assainissement des informations personnelles identifiables.

Et puis il y a les humains au téléphone

Quelques jours avant Connect, Reuters a révélé un test interne beaucoup moins futuriste. Meta expérimente un système de « human concierge » dans lequel des prestataires humains peuvent prendre en charge certains appels téléphoniques effectués au travers de Muse.

Ce test n’est pas présenté comme une fonction publique actuellement accessible aux utilisateurs. Reuters rapporte que Meta l’expérimente auprès de ses employés afin de recueillir des retours avant une éventuelle sortie.

Selon les messages internes consultés par Reuters, certains salariés ont soulevé la question de la confidentialité : un utilisateur pourrait penser qu’il délègue une conversation à un système automatisé alors qu’un opérateur humain reçoit potentiellement certaines informations.

Meta répond que cette expérimentation sert précisément à mettre au point les protections et les règles de divulgation nécessaires. Son porte-parole Daniel Roberts a déclaré que l’entreprise ne déploierait cette fonction publiquement que lorsqu’elle serait prête et avec les informations appropriées pour les utilisateurs.

Le test du concierge dit beaucoup sur le problème que Muse essaie de résoudre

Un agent peut facilement envoyer une requête structurée à une API. Téléphoner à un commerce est beaucoup moins propre : accents, menus vocaux, bruit, personnes qui s’interrompent, questions inattendues et règles implicites font partie de la conversation.

Le recours expérimental à des humains n’invalide donc pas nécessairement Muse. Il révèle plutôt où les interfaces numériques cessent d’être prévisibles.

Mais il crée une obligation de transparence très différente. Si un agent remplit un formulaire avec un modèle d’IA, le risque est surtout celui d’une mauvaise action automatisée. Si un prestataire humain écoute ou conduit une conversation que l’utilisateur pensait confier uniquement à une IA, la question devient également celle de savoir qui peut entendre les données.

C’est exactement le type de détail qu’un produit présenté comme « personnel » ne peut pas cacher derrière le mot agent.

Muse n’est plus seulement une app américaine

Au lancement du 8 septembre, Meta annonçait Muse sur iOS, Android et muse.ai aux États-Unis, ainsi que dans WhatsApp. Lors de Connect, la société indiquait que l’agent était désormais disponible aux États-Unis, au Canada et au Mexique, avec d’autres marchés prévus.

L’application iPhone confirme le positionnement très large du produit : email, réservations, calendrier, dépenses, nutrition, shopping, voyages et objectifs personnels sont tous présentés comme des usages possibles.

Muse dispose d’un niveau gratuit avec limite d’utilisation et de formules payantes pour davantage d’usage. Meta n’a donc pas conçu l’agent uniquement comme une démonstration destinée à alimenter ses autres produits.

Après les lunettes, Meta prépare même un appareil uniquement pour Muse

Connect a aussi dévoilé Muse Charm, un petit appareil de poche centré sur la conversation avec l’agent et son modèle vocal temps réel.

Meta n’en a encore donné ni prix, ni date de sortie précise, ni fiche technique complète. L’entreprise promet davantage d’informations plus tard dans l’année.

Il est néanmoins révélateur qu’un agent lancé sous forme logicielle obtienne déjà son propre appareil potentiel quelques semaines après sa sortie.

Le vrai produit, c’est la délégation

Le pari de Meta avec Muse n’est finalement pas de fabriquer un meilleur champ de texte pour poser des questions. Il consiste à obtenir suffisamment d’accès — navigateur, email, calendrier, paiement, commerce, applications de travail et bientôt caméra portée sur le visage — pour qu’une phrase puisse déclencher une chaîne d’actions.

C’est aussi ce qui rend le produit beaucoup plus difficile à sécuriser qu’un chatbot classique. Une mauvaise réponse peut être agaçante. Un mauvais achat, un email envoyé au mauvais destinataire ou une donnée personnelle confiée à la mauvaise personne produit une conséquence réelle.

Connect 2026 montre que Meta ne ralentit pas pour autant : Muse gagne des yeux avec les lunettes, davantage de services, une voix persistante, une adresse email et bientôt peut-être son propre objet de poche.

Le test du concierge humain rappelle simplement qu’entre « l’agent a compris » et « le travail est réellement terminé », il reste encore un morceau du monde qui ne se comporte pas comme une API.