Пользователи YouTube Shorts теперь могут использовать Google Lens для поиска в видео

Google анонсировала ^[1] новую функцию YouTube, которая позволяет использовать Google Lens при просмотре YouTube Shorts. С помощью Google Lens пользователь сможет искать объекты или места, которые появляются в видео. 

Опция теперь доступна в приложении YouTube на iOS и Android.

Чтобы активировать Google Lens, нужно при воспроизведении видео YouTube Shorts приостановить ролик, нажав на экран. После этого в верхнем меню понадобится нажать кнопку Lens. Для поиска с помощью Google Lens нужно обвести область или кликнуть по объекту на экране.

Если требуется перевести субтитры в видео, то можно просто нажать «Перевести» в нижней правой части экрана.

Чтобы завершить использование Google Lens, нужно нажать X в верхней левой части экрана или провести пальцем вниз в верхней части панели результатов.

На данный момент новая опция не будет работать в видеороликах Shorts, которые имеют партнёрские теги YouTube Shopping, а реклама не будет отображаться на странице результатов поиска.

Ранее технология распознавания изображений Google Lens получила ^[2] две новые функции на iPhone. Они включают использование жестов и ИИ-обзоры.

Между тем разработчики Hugging Face выпустили ^[3] HuggingSnap — аналог Google Lens для iOS, который работает прямо на устройстве. Модель распознаёт объекты на фотографиях и отвечает на вопросы пользователя. Их можно задавать голосом или текстом. Также есть кнопка, которая запускает генерацию описания к снимку.