Google Lens теперь умеет искать информацию по видео с помощью Gemini

Google обновил приложение Google Lens, добавив возможность поиска информации по видео. Теперь пользователи могут записывать видео и задавать вопросы голосом о том, что они видят.

Что известно

Эта функция использует модель искусственного интеллекта Gemini для анализа видеоконтента и предоставления ответов. Например, если пользователь видит рыб в аквариуме и хочет узнать, почему рыбы плавают вместе, достаточно будет записать видео и задать вопрос голосом. Google Lens обработает видео и предоставит ответ на основе информации из интернета, как показано на примере ниже.

Кроме того, Google добавил возможность задавать вопросы голосом при поиске по фотографиям. Ранее пользователи могли вводить вопросы только текстом после съемки фото.

Новая функция доступна на Android и iOS, но пока только на английском языке. В будущем Google планирует добавить поддержку распознавания звуков в видео, что позволит, например, идентифицировать птиц по их пению.

Источник: The Verge