Gemini Beta propose des réponses proactives à partir de photos, d'e-mails et bien plus encore

Mercredi, Google a annoncé une nouvelle fonctionnalité en version bêta dans l'application Gemini qui permet à l'assistant IA de personnaliser ses réponses en exploitant l'ensemble de votre écosystème Google, à commencer par Gmail, Photos, la Recherche et l'historique YouTube.

Si Gemini pouvait déjà récupérer des informations à partir de ces applications, il est désormais capable d'analyser vos données pour fournir des résultats proactifs, comme relier un fil de discussion dans vos e-mails à une vidéo que vous avez regardée. Selon Google, cela signifie que Gemini comprend le contexte sans qu'on lui indique où chercher.

Le géant technologique précise que cette fonctionnalité bêta, baptisée « Personal Intelligence », est désactivée par défaut, laissant aux utilisateurs le choix de connecter ou non leurs applications Google à Gemini, et à quel moment. Bien sûr, tout le monde ne souhaite pas que l'IA analyse ses photos et son historique YouTube. Google précise que si vous connectez vos applications, Gemini n'utilisera « Personal Intelligence » que lorsqu'il estimera que cela serait utile.

« Personal Intelligence présente deux atouts majeurs : le raisonnement à partir de sources complexes et la récupération de détails spécifiques — issus d’un e-mail ou d’une photo, par exemple — pour répondre à votre question », a écrit Josh Woodward, vice-président de l’application Gemini, de Google Labs et d’AI Studio, dans un article de blog. « Elle combine souvent ces éléments, en exploitant à la fois le texte, les photos et la vidéo pour fournir des réponses sur mesure. »

Woodward a donné l’exemple d’une situation où il faisait la queue dans un magasin de pneus sans se souvenir de la taille des pneus de sa voiture. Alors que la plupart des chatbots IA peuvent déterminer la taille des pneus d’une voiture, Woodward explique que Gemini va plus loin en proposant des réponses personnalisées. Dans son cas, Gemini lui a suggéré des pneus toutes saisons après avoir identifié des photos de voyages en famille dans Google Photos. M. Woodward a également mentionné avoir oublié son numéro d'immatriculation, mais Gemini a pu le retrouver à partir d'une photo dans Photos.

« J’ai également reçu d’excellentes recommandations de livres, de spectacles, de vêtements et de voyages », a écrit M. Woodward. « Cette semaine encore, il s’est révélé exceptionnel pour planifier nos prochaines vacances de printemps. En analysant les centres d’intérêt de notre famille et nos voyages passés dans Gmail et Photos, il a évité les pièges à touristes. À la place, il a suggéré un voyage en train de nuit et des jeux de société spécifiques auxquels nous pourrions jouer pendant le trajet. »

Google affirme disposer de garde-fous pour les sujets sensibles, de sorte que Gemini évitera de faire des suppositions proactives sur des données sensibles telles que la santé. Cependant, le géant technologique précise également que Gemini abordera ces données si vous le lui demandez.

Inscrivez-vous sur la liste d'attente de Disrupt 2026

Ajoutez-vous à la liste d’attente de Disrupt 2026 pour être parmi les premiers à bénéficier des billets Early Bird dès leur mise en vente. Les éditions précédentes de Disrupt ont accueilli des intervenants de Google Cloud, Netflix, Microsoft, Box, Phia, a16z, ElevenLabs, Wayve, Hugging Face, Elad Gil et Vinod Khosla — parmi plus de 250 leaders du secteur animant plus de 200 sessions conçues pour accélérer votre croissance et renforcer votre avantage concurrentiel. De plus, venez rencontrer des centaines de startups innovantes issues de tous les secteurs.

Inscrivez-vous sur la liste d'attente de Disrupt 2026

Inscrivez-vous sur la liste d'attente de Disrupt 2026 pour être parmi les premiers à bénéficier des billets en prévente dès leur mise en vente. Les éditions précédentes de Disrupt ont accueilli des intervenants de Google Cloud, Netflix, Microsoft, Box, Phia, a16z, ElevenLabs, Wayve, Hugging Face, Elad Gil et Vinod Khosla — parmi plus de 250 leaders du secteur animant plus de 200 sessions conçues pour accélérer votre croissance et renforcer votre avantage concurrentiel. De plus, venez rencontrer des centaines de startups innovantes dans tous les secteurs.

Par ailleurs, Gemini ne s'entraîne pas directement sur votre boîte de réception Gmail ou votre bibliothèque Google Photos. Il s'entraîne plutôt sur des invites spécifiques dans Gemini et sur les réponses du modèle. Dans les exemples ci-dessus, les photos du road trip, la photo de la plaque d'immatriculation dans Photos et les e-mails dans Gmail ne sont pas directement utilisés pour entraîner le modèle — ils ne servent qu’à générer une réponse, explique Google.

Personal Intelligence est en cours de déploiement pour les abonnés à Google AI Pro et AI Ultra aux États-Unis, avec des projets d'extension à d'autres pays et à l'offre gratuite de Gemini.

Google a fourni une liste d'exemples de requêtes à essayer, notamment « Aide-moi à planifier mon week-end à [ville, par exemple New York] en fonction de ce que j'aime faire », « Recommande-moi des documentaires en fonction de ce qui m'intéresse », ou « En te basant sur mes reçus de livraison et d'épicerie dans Gmail, mon historique de recherche et mon historique de visionnage sur YouTube, recommande-moi 5 chaînes YouTube qui correspondent à mon style de cuisine ou à mon approche de la préparation des repas ».