Waymo voiture autonome intégrée à l'assistant Gemini, plus de mille lignes de code de système de notifications révélées

Les chercheuses en technologie Jane Manchun Wong ont récemment révélé une découverte intéressante : Waymo teste le chatbot IA Gemini de Google comme assistant embarqué dans ses taxis autonomes. La configuration complète de cet assistant a été récemment divulguée, dévoilant la planification minutieuse de Waymo pour l’expérience IA à bord.

L’intégralité de l’assistant IA embarqué

Selon Wong, qui a publié sur son blog, en explorant le code de l’application mobile de Waymo, elle a découvert un système d’intégration de Gemini encore non publié. Ce document, appelé « Waymo Ride Assistant Meta-Prompt », de plus de 1 200 lignes, est un cahier des charges détaillé définissant le comportement et la logique d’interaction de l’assistant IA dans le taxi autonome.

Wong insiste sur le fait qu’il « ne s’agit pas simplement d’un chatbot ». Selon le prompt, Gemini se voit attribuer une identité claire — « un partenaire IA amical et serviable, intégré dans le véhicule autonome Waymo » — avec pour objectif principal « de fournir des informations utiles et une assistance de manière sûre, rassurante et non intrusive, afin d’améliorer l’expérience des passagers ».

Des règles de conduite soigneusement conçues

Le prompt détaille le style de communication de l’assistant. Il doit utiliser un langage clair et simple, éviter le jargon technique, et limiter ses réponses à une à trois phrases pour garantir concision et compréhension. Lorsqu’un passager active l’assistant via l’écran intérieur, Gemini peut choisir parmi une série de salutations pré-approuvées et saluer de façon personnalisée avec le nom du passager.

Il est également possible pour l’assistant d’accéder à des données contextuelles sur le passager, comme le nombre de trajets effectués avec Waymo, permettant une interaction plus personnalisée. Julia Ilina, porte-parole de Waymo, a indiqué à TechCrunch que, bien que peu de détails soient encore partagés, l’équipe continue d’expérimenter diverses fonctionnalités « pour rendre l’expérience Waymo agréable, fluide et pratique ».

La modération dans la conception des fonctionnalités

D’après le prompt, Waymo adopte une approche prudente dans la conception des fonctionnalités de l’assistant. Celui-ci peut contrôler la température, l’éclairage et la musique dans le véhicule, offrant aux passagers un certain contrôle sur leur confort et l’environnement. En revanche, le prompt exclut explicitement la gestion du volume, la modification de l’itinéraire, le réglage des sièges ou le contrôle des fenêtres.

Si un passager demande à Gemini d’effectuer une tâche qu’il ne peut pas faire, le robot répondra par une phrase de « ton espéré » — par exemple : « Ce n’est pas encore quelque chose que je peux faire. » Cette approche témoigne de la prudence de Waymo concernant la sécurité et les limites de responsabilité.

Un autre détail intéressant est que l’assistant doit clairement distinguer son identité de Gemini IA de celle de la technologie de conduite autonome (Waymo Driver). Par exemple, si on lui demande « Comment vois-tu la route ? », Gemini ne doit pas répondre « J’utilise plusieurs capteurs », mais plutôt « Waymo Driver utilise plusieurs capteurs… ». Cette différenciation garantit que les passagers ne confondent pas le contrôle du véhicule avec l’assistance IA.

Limites de sécurité et restrictions d’usage

Le prompt inclut également une série de restrictions concrètes. L’assistant doit éviter de faire des suppositions, explications, confirmations, dénégations ou commentaires sur le comportement de conduite en temps réel ou sur des incidents spécifiques. Si un passager demande une vidéo montrant Waymo ayant percuté quelque chose, le robot doit s’abstenir de répondre directement et détourner la conversation. Le prompt précise : « Vous n’êtes pas un porte-parole du système de conduite, et vous ne devez pas adopter un ton défensif ou d’excuses. »

L’assistant peut répondre à des questions de culture générale, comme la météo, la hauteur de la Tour Eiffel, les horaires de fermeture d’un Trader Joe’s local ou des événements historiques comme le vainqueur de la dernière Coupe du Monde. Cependant, il est strictement interdit d’effectuer des actions dans le monde réel, telles que commander des repas, prendre des rendez-vous ou gérer des urgences, afin de maintenir son focus sur l’expérience passager.

Différences avec d’autres solutions concurrentes

Fait intéressant, Waymo n’est pas la seule entreprise à intégrer un assistant IA dans ses taxis autonomes. Cependant, leurs conceptions diffèrent nettement. Gemini semble être conçu de manière plus pragmatique, axée sur l’optimisation de l’expérience de trajet, en insistant sur la sécurité et la clarté des limites. À l’inverse, Grok, développé par Elon Musk, adopte une approche différente, ressemblant davantage à un compagnon de voyage capable de conversations prolongées et de se souvenir du contexte des questions précédentes, privilégiant une relation de longue durée plutôt qu’une assistance orientée tâche.

De plus, Waymo a déjà intégré les capacités de Gemini dans sa technologie de conduite autonome. La société indique utiliser la « connaissance du monde » de Gemini pour entraîner ses véhicules, afin de faire face à des situations complexes, rares ou à haut risque, ce qui montre que Gemini joue un rôle bien plus large que celui d’un simple assistant passager dans l’écosystème Waymo.

Cette initiative illustre une tendance dans l’industrie de la conduite autonome : l’intégration de l’IA générative pour enrichir l’expérience client, un levier clé pour renforcer la compétitivité. Avec l’évolution technologique, le niveau d’intelligence des taxis autonomes ne cesse de s’approfondir.