Google Lens получила новые ИИ-функции на iPhone

Технология распознавания изображений Google Lens получила ^[1] две новые функции на iPhone. Они включают использование жестов и ИИ-обзоры.

Пользователи получают новые опции, когда просматривают веб-страницы на iPhone через приложение Google или браузер Chrome.

Они могут использовать жесты, такие как рисование, выделение или нажатие, чтобы выбирать и искать данные на экране. В Chrome потребуется выбрать меню с тремя точками и нажать «Поиск на экране с помощью Google Lens». В приложении Google после перехода в трёхточечное меню потребуется выбрать «Поиск на этом экране». 

«Читаете ли вы статью, покупаете товар или смотрите видео, функцию можно применить для быстрого визуального поиска во время просмотра, без необходимости делать снимок экрана или открывать новую вкладку», — отметили в Google. Компания добавила, что в будущем эта опция будет доступна через значок Lens ^[2] в адресной строке Chrome, аналогично интерфейсу в настольной версии браузера. Функцию начали развёртывать по всему миру как в Chrome, так и в приложении Google для iOS.

Также инструмент предложит ИИ-обзоры в результатах Lens, что снимет необходимость добавлять вопрос в визуальный поиск. Например, при нажатии значка камеры в строке поиска появится соответствующий обзор, описывающий то, что человек видит на картинке, и дающий ссылки на ресурсы.

Это обновление развёртывается для англоязычных пользователей в приложениях Google для Android и iOS, а скоро появится в Chrome на настольных компьютерах и мобильных устройствах. 

В январе вместе с анонсом Gemini 2.0 Flash Google представила ^[3] разработки, которые исследуют агентные возможности Gemini 2.0. Так, в Project Astra внедрили возможность общаться на нескольких языках и на смешанном языке. Модель запоминает до 10 минут сеанса и может использовать Google Search, Lens и Maps.