Google Lens sait désormais comment rechercher des informations vidéo avec Gemini

Google a mis à jour l'application Google Lens en y ajoutant la possibilité de rechercher des informations à partir d'une vidéo. Les utilisateurs peuvent désormais enregistrer une vidéo et poser des questions avec leur voix sur ce qu'ils voient.

Ce que nous savons

La fonction utilise le modèle d'intelligence artificielle Gemini pour analyser le contenu vidéo et fournir des réponses. Par exemple, si un utilisateur voit des poissons dans un aquarium et souhaite savoir pourquoi ils nagent ensemble, il lui suffit d'enregistrer une vidéo et de poser une question avec sa voix. Google Lens traitera la vidéo et fournira une réponse basée sur des informations provenant du web, comme le montre l'exemple ci-dessous.

Google a également ajouté la possibilité de poser des questions à la voix lors d'une recherche sur des photos. Auparavant, les utilisateurs ne pouvaient saisir des questions que par texte après avoir pris une photo.

Cette nouvelle fonctionnalité est disponible sur Android et iOS, mais uniquement en anglais pour le moment. À l'avenir, Google prévoit d'ajouter la reconnaissance des sons dans les vidéos, ce qui permettra, par exemple, d'identifier les oiseaux par leur chant.

Source : The Verge : The Verge