Пользователи Google получили доступ к новому способу поиска. Как пишет BBC, теперь можно задавать вопросы голосовому помощнику прямо во время видеосъемки и получать информацию об объекте, который в этот момент находится в кадре.
Уточняется, что сервис записывает видео как серию изображений и обрабатывает их с помощью технологий компьютерного зрения. Затем собранная информация передается специальной модели Gemini, которая умеет понимать последовательность кадров и находить ответ на поставленный вопрос в интернете.
Сервис пока не может определять звуки — например, пение птиц на видео.
В данный момент функция работает только на английском языке.