Google teste un agent Gemini capable d’appeler des entreprises et d’effectuer des tâches pour les utilisateurs

Google teste une nouvelle fonctionnalité Gemini capable d’appeler des entreprises au nom d’un utilisateur, de gérer des systèmes téléphoniques automatisés, d’attendre en ligne et d’effectuer certaines tâches comme des réservations ou des changements de rendez-vous. Baptisé « Call for Me », l’expérience cible d’abord les propriétaires de Pixel 11 aux États-Unis qui paient un abonnement Gemini.

Cette fonctionnalité marque un passage de la navigation téléphonique assistée par IA à l’action déléguée. Plutôt que de simplement aider un utilisateur à trouver le numéro d’une entreprise ou à se déplacer dans un système de réponse vocale interactive, Gemini peut mener la conversation et partager des informations personnelles que l’utilisateur a approuvées. Pour l’instant toutefois, l’accès est limité et le système reste expérimental.

Une expérience limitée aux États-Unis

Selon les informations de TechCrunch AI et The Decoder, Call for Me nécessite à la fois un abonnement Gemini payant et la version bêta de l’application Téléphone de Google pour Android. Google commence avec les appareils Pixel 11 aux États-Unis plutôt que de rendre la fonctionnalité largement disponible sur les téléphones Android ou sur d’autres marchés.

Google a déclaré que ce lancement limité reflète la difficulté de gérer de vraies conversations. Les appels professionnels peuvent impliquer des demandes ambiguës, des questions inattendues, une mauvaise qualité audio, des transferts et des politiques qui ne sont pas clairement énoncées à l’avance. L’entreprise considère donc la fonctionnalité comme un test, afin d’évaluer la fiabilité de Gemini en dehors de démonstrations contrôlées.

Call for Me utilise également le propre numéro de téléphone de l’utilisateur pour passer les appels directement depuis le téléphone. Ce détail peut rendre l’interaction plus familière pour les entreprises, mais il rend aussi le consentement, la divulgation et la responsabilité plus importants lorsqu’une IA s’adresse au personnel ou prend des engagements au nom d’un client.

De la recherche à la transaction

Google indique que Gemini peut utiliser des informations personnelles approuvées pour effectuer un éventail d’actions plus large que ses outils d’appel précédents. Parmi les exemples possibles figurent demander si un produit est en stock, mettre un article de côté, réserver une table dans un restaurant ou déplacer un rendez-vous existant à une autre date.

L’agent est conçu pour se présenter, naviguer dans les menus téléphoniques, rester en attente et poursuivre la conversation avec un employé de l’entreprise. Les utilisateurs peuvent suivre l’échange via une transcription en direct et reprendre la main à tout moment, selon la description de l’entreprise rapportée par les deux publications.

Cette combinaison de délégation et d’intervention est importante. Un appel totalement autonome pourrait être efficace, mais il serait difficile de lui faire confiance si le système comprenait mal une date, un prix, un nom ou une politique d’annulation. Une transcription en direct permet aux utilisateurs de repérer les erreurs, tandis que l’option de prise en main offre une issue lorsque la conversation devient trop complexe.

Call for Me s’appuie sur les travaux de Google dans ce domaine depuis plusieurs années. Google Duplex a démontré il y a quelques années des appels automatisés à des restaurants et salons, tandis que les utilisateurs de Pixel ont également reçu des outils comme Hold for Me, Talk to a Live Rep et Direct My Call. Plus récemment, la fonctionnalité Ask for Me de Google s’est concentrée sur les appels à des entreprises pour recueillir des informations telles que les prix ou les services disponibles.

Preuves et limites de l’affirmation

Les rapports disponibles établissent que Google teste Call for Me et décrivent les capacités prévues par l’entreprise. Ils ne fournissent toutefois pas de preuves indépendantes concernant les taux de réussite, les taux d’erreur, la durée des appels, l’acceptation par les entreprises ou l’adoption par les utilisateurs. Les affirmations sur ce que la fonctionnalité peut gérer doivent donc être considérées comme une description produit de Google, et non comme des résultats de performance vérifiés.

Le déploiement restreint signifie également qu’il n’y a pas encore suffisamment de preuves pour juger si Gemini peut gérer de manière fiable la grande variété de conversations impliquées dans le commerce de détail, l’hôtellerie, la santé ou les services. Une tâche comme vérifier un stock peut être relativement simple, tandis que le report d’un rendez-vous peut nécessiter une vérification d’identité, une interprétation des politiques ou des décisions liées au paiement.

Le contexte concurrentiel évolue rapidement. TechCrunch AI a rapporté que Muse et Instinct de Meta peuvent également passer des appels pour les utilisateurs, tandis que The Decoder a relié le test de Google à des efforts antérieurs d’appels par IA. Ces comparaisons montrent que les agents IA passent des interfaces texte et applicatives aux interactions vocales, mais les sources n’établissent pas quel système est le plus performant.

Pourquoi ce test compte pour les développeurs et les entreprises

Pour les équipes produit, Call for Me illustre une forme plus exigeante de conception d’agents. Le système doit combiner reconnaissance vocale, gestion du dialogue, navigation dans les systèmes téléphoniques, permissions de l’utilisateur, traitement des données personnelles et reprise lorsque l’appel sort du script. Le défi d’ingénierie n’est pas simplement de générer une voix naturelle ; il s’agit de maintenir un contrôle fiable sur une transaction réelle.

Les entreprises devront également réfléchir à la manière d’identifier et de gérer les appels émis par une IA. Si plusieurs agents commencent à contacter les entreprises, les équipes de service client pourraient faire face à davantage de conversations automatisées, à des demandes répétées et à une incertitude quant à savoir si l’appelant est autorisé à effectuer un achat ou à modifier un rendez-vous. Les entreprises pourraient réagir en renforçant la vérification ou en limitant les appels automatisés.

Pour les consommateurs, l’attrait est clair : Gemini pourrait supprimer le temps passé à écouter les menus et à attendre en ligne. Mais la délégation crée des risques liés aux informations incorrectes, aux engagements accidentels, à la vie privée et aux frictions sociales. La capacité à approuver les informations à l’avance, à surveiller l’appel et à intervenir pourrait devenir aussi importante que la capacité de l’agent à terminer la tâche.

Ce qu’il faut surveiller ensuite

Le premier signal sera de savoir si Google étend Call for Me au-delà des propriétaires de Pixel 11, des abonnés payants Gemini et de l’application Téléphone bêta. Une disponibilité plus large sur les appareils et dans les zones géographiques indiquerait que l’entreprise passe au-delà d’une première expérience.

Plus important encore seront les preuves de fiabilité : fréquence à laquelle les appels atteignent le bon service, fréquence à laquelle les utilisateurs doivent reprendre la main, acceptation ou non des appelants IA par les entreprises, et manière dont Google gère les transactions échouées ou contestées. La documentation produit devrait également préciser quelles informations personnelles peuvent être partagées, comment le consentement est enregistré et si les appels sont clairement identifiés comme assistés par IA.

Les stratégies de déploiement des concurrents fourniront un autre test. Muse et Instinct de Meta pourraient étendre la délégation vocale à davantage de produits grand public, tandis que l’avantage de Google pourrait venir de l’intégration directe de cette capacité dans l’application Téléphone d’Android et le matériel Pixel.

Point de vue Creati.ai

Call for Me constitue un test significatif pour savoir si les agents IA grand public peuvent passer de la réponse aux questions à l’exécution de tâches ordinaires hors ligne. Google dispose de la distribution, de l’intégration téléphonique et d’années d’expérimentations antérieures pour rendre le cas d’usage crédible, mais le lancement restreint montre qu’une conversation fiable dans le monde réel reste un problème non résolu.

Le succès de la fonctionnalité devrait être jugé moins sur le naturel de la voix que sur la capacité des utilisateurs à déléguer une tâche en toute sécurité, à comprendre ce qui s’est passé et à se rétablir lorsque Gemini commet une erreur. Tant que Google n’aura pas publié de données plus larges sur l’utilisation et la fiabilité, Call for Me doit être vu avant tout comme une importante expérience produit, et non comme une preuve que les agents téléphoniques sont prêts à une autonomie de routine.