Meta mise tout sur les agents personnels : Muse intégré aux lunettes, Mac et email, reliant achats et travail

Meta est en train de transformer son agent personnel d'intelligence artificielle, Muse, en une plateforme centrale couvrant tous les aspects de la vie de l'utilisateur : des lunettes intelligentes au bureau Mac, des achats au travail quotidien, une stratégie globale axée sur l’"intelligence personnelle supérieure" est en train de se concrétiser rapidement.

Le 23 septembre, Meta a organisé sa conférence annuelle Connect pour les développeurs à Menlo Park, Californie. Le PDG Mark Zuckerberg a annoncé que Muse sera intégré à la gamme de lunettes intelligentes de Meta, disposera de nouvelles capacités d'opération sur Mac, obtiendra une adresse e-mail indépendante et conclura des partenariats avec des principaux détaillants tels que Walmart, Sephora, Best Buy et Gap. Parallèlement, Meta a également lancé un appareil portable appelé "Muse Charm", qui devrait être expédié avant la saison des achats de fin d'année.

Muse, lancé début septembre, est actuellement en tête du classement des applications sur l'App Store d'Apple et vient d'entrer sur le marché canadien. Zuckerberg le présente comme le pari le plus important de Meta à ce jour dans le domaine de l’IA grand public, disant : "Dans les années à venir, je m’attends à ce que Muse devienne une super intelligence personnelle utilisée par des milliards de personnes dans le monde pour atteindre leurs objectifs et améliorer leur vie."

En ce qui concerne la monétisation, Meta prévoit de proposer une large utilisation gratuite à ses utilisateurs et de générer des revenus en prélevant une petite commission sur les transactions effectuées via la plateforme. Grâce à la hausse continue de son action, le titre de Meta a augmenté de 30% depuis le début du mois, ce qui pourrait représenter sa meilleure performance mensuelle depuis juillet 2013.

La conférence Connect de cette année était radicalement différente de celle d'il y a quelques années. A l’époque, Zuckerberg avait annoncé haut et fort miser sur le Métavers et renommé son entreprise en conséquence. Cette année, le sujet du Métavers a pratiquement disparu. "Nous avons décidé de baisser temporairement la priorité accordée au Métavers", a déclaré Zuckerberg sur scène.

L’histoire centrale de cette année est celle de "l’intelligence personnelle supérieure". Habillé d’un t-shirt noir arborant la phrase "BUILDING IS MY LOVE LANGUAGE", Zuckerberg a qualifié Muse de "cœur" de la vision globale de Meta et a présenté en direct des fonctionnalités telles que la prise de rendez-vous au calendrier via une commande vocale portée par des lunettes intelligentes pour une réunion avec le CTO Andrew Bosworth—une démonstration parfaitement réussie.

Sur le plan technique, chaque Muse fonctionne dans un environnement informatique sécurisé et privé distinct (que Meta appelle "machine virtuelle sécurisée Muse"), basé sur le modèle multimodal Muse Spark spécialement entraîné pour les agents personnels. Contrairement aux chatbots traditionnels, Muse fonctionne en tâche de fond, accepte la personnalisation de rôle et de personnalité, le rôle par défaut étant nommé Jolly.

Lors de la conférence Connect, Meta a lancé plusieurs nouveaux matériels profondément liés à Muse, créant une porte d’entrée pour la compréhension de l’utilisateur à tout moment de la journée.

Dans la gamme de lunettes, Meta établit désormais une hiérarchie plus claire : les Ray-Ban Meta Audio à 349 $ sans caméra, ciblant la musique, les appels et l’interaction vocale, offrent une autonomie jusqu’à 12 heures et sont conçues pour être portées toute la journée ; la troisième génération de Ray-Ban Meta à partir de 449 $ garde la caméra, améliore la capture photo, la réduction du bruit et l’autonomie ; la version actuelle Ray-Ban Display ajoute des fonctions de navigation et étend ses marchés. Meta prévoit d’offrir plus de 100 modèles de lunettes d’ici la fin de l’année, y compris une édition spéciale en partenariat avec Lisa de Blackpink.

Dans la haute gamme, Meta a dévoilé les Meta VR Glasses, où l'unité de calcul et la batterie sont déportées sur un accessoire externe, réduisant ainsi le poids du dispositif à environ 100 grammes, destinées aux marchés du cinéma, du contenu immersif et du multitâche, pour un prix de 1 299,99 $ et une commercialisation prévue au printemps 2027.

Muse sera intégré à ces lunettes AI "dans les mois à venir" ; un mot-clé d'activation permettra d’utiliser l’IA sans contact tactile, pour réserver un rendez-vous, tenir un journal alimentaire, guider l’exercice ou même acheter des produits aperçus directement. Meta précise que Muse fonctionnera en arrière-plan et informera proactivement lorsque des tâches sont terminées.

Dans l’univers de la productivité, Meta annonce l'intégration de la capacité "utilisation de l’ordinateur" de Muse sur la plateforme Mac. Avec autorisation, Muse pourra contrôler n’importe quelle application sur le Mac, et poursuivre l’exécution de tâches programmées même après le départ de l’utilisateur.

"Vous pouvez lui demander de gérer une petite entreprise ou de finir votre travail," commente Alexandr Wang, Chief AI Officer chez Meta lors de son intervention, "Vous pouvez quitter l’ordinateur, il s’occupera de toutes les tâches en attente."

La fonctionnalité e-mail est aussi en développement. Muse aura bientôt sa propre adresse mail ; il pourra être ajouté à des fils de discussion, ou recevoir des transferts pour gérer directement le courrier. Wang ajoute que cette fonctionnalité sera disponible "très prochainement", sans préciser de date.

En outre, Muse proposera un avatar numérique en temps réel, animé par le nouveau modèle AI Muse Realtime Avatar, permettant à l'utilisateur d'interagir en vidéo avec son double virtuel personnalisé.

Le commerce est le premier cas d'usage de la monétisation par Muse. Meta a déjà conclu des accords avec Stripe et Shopify : Muse donne accès à tout le catalogue Shopify, permet des achats via Link et Shop Pay, et la prise en charge de PayPal continue de s’étendre. Les nouveaux partenaires commerciaux incluent Walmart, Best Buy, Gap, Sephora, Wayfair, ainsi que le site de voyages Expedia et la plateforme de livraison alimentaire Instacart (bientôt disponible). Pour le travail, de nouveaux connecteurs pour Box, GitHub, Granola et Notion ont été ajoutés.

Il est à noter, selon le Wall Street Journal, qu’Amazon a interdit à Muse d’effectuer des achats sur sa plateforme à la veille de la conférence, affirmant que cela n'était pas autorisé.

Sur le plan de l’ouverture de la plateforme, Meta a déjà permis aux développeurs de construire leurs propres connecteurs Muse. Wang affirme qu’en moins d’une semaine après l’ouverture de la plateforme, Meta a reçu plus de 1 500 candidatures, "Je pense que cela représente probablement une opportunité générationnelle", dit-il.

Sur le plan commercial, Meta propose une large utilisation gratuite et prend une petite commission sur les transactions réalisées via Muse. Les cas d’utilisation couvrent déjà l’achat, les voyages, la négociation de factures, l’assurance et plus encore. Meta indique qu’un nouveau modèle, le plus puissant de la gamme, sera bientôt dévoilé, permettant d’améliorer considérablement tout l’écosystème Muse.