Après l’analyse des vidéos Youtube et des fichiers PDF, Gemini s’enrichit d’une puissante fonctionnalité IA et en plus elle est gratuite.
Google fait évoluer Gemini avec une fonctionnalité qui va faire trembler ChatGPT. La firme de Mountain View a décidé de rendre gratuite une des fonctionnalités les plus impressionnantes de Gemini. Elle donne littéralement des yeux à l’IA conversationnelle.
Maintenant Gemini a des yeux
Gemini accède à la caméra de votre smartphone et vous pouvez lui demander en temps réel ce qu’elle voit. Google avait fait une démo de ce concept lors de la Google I/O 2024. Il était à l’époque baptisé Project Astra.
Vous pouvez voir ce dernier en action dans la vidéo ci-dessous. C’est impressionnant. Dans cette démo, une femme équipée d’un smartphone demande à l’IA de lui indiquer quand elle passe devant un appareil capable d’émettre du son. Gemini identifie immédiatement une enceinte. La personne poursuit l’expérience avec des questions de plus en plus complexes.
L’opération est simple et naturelle. Ce partage ne se limite pas à l’appareil photo. Gemini Live interagit avec tout ce qui s’affiche sur votre écran. L’IA sait aussi analyser les sites internet ou les documents que vous consultez sur votre smartphone.
Google a confirmé sur X/Twitter que « Gemini Live with camera and screen share » va devenir gratuit pour tous les utilisateurs Android. Le déploiement va se dérouler sur plusieurs semaines.
Comment marche le partage Gemini Live avec caméra ?
Pour en profiter, vous devrez au préalable installer sur votre smartphone l’application Gemini. Un nouveau pop-up s’affiche en bas de l’écran pour vous indiquer que l’option « Share screen with Live » est disponible.
En activant cette option, vous avez accès à une fenêtre avec un compteur. Deux boutons permettent d’arrêter ou de mettre en pause le partage de la caméra avec Gemini. Il ne reste plus qu’à parler avec Gemini de ce qui s’affiche sur votre écran.
Google conseille de ne pas faire de mouvements brusques et de conserver la caméra stable pour de meilleurs résultats.