Модель V-JEPA 2 от Meta* учит ИИ понимать окружающую среду

В среду компания Meta представила свою новую модель ИИ V-JEPA 2 ^[1], «модель мира», которая призвана помочь агентам ИИ понимать окружающий мир.

V-JEPA 2 — это расширение модели V-JEPA ^[2], выпущенной Meta в прошлом году, которая была обучена на более чем 1 миллионе часов видео. Предполагается, что эти обучающие данные помогут роботам или другим агентам ИИ работать в физическом мире, понимая и предсказывая, как такие понятия, как гравитация, влияют на то, что происходит дальше в последовательности событий.

Это те самые связи, основанные на здравом смысле, которые возникают у маленьких детей и животных по мере развития их мозга ^[3]. Например, когда вы играете с собакой в «принеси», собака (будем надеяться) понимает, что если подбросить мяч вверх, он отскочит, или что нужно бежать туда, где, по её мнению, мяч приземлится, а не туда, где он находится в данный момент.

Meta приводит примеры, в которых робот может столкнуться, например, с ситуацией, когда он держит в руках тарелку и лопатку и идёт к плите с приготовленными яйцами. ИИ может предсказать, что следующим действием, скорее всего, будет использование лопатки, чтобы переложить яйца на тарелку.

По данным Meta, V-JEPA 2 в 30 раз быстрее, чем модель Cosmos ^[4] от Nvidia, которая также пытается улучшить интеллект ^[5], связанный с физическим миром. Однако Meta, возможно, оценивает свои модели по другим критериям, в отличие от Nvidia.

«Мы считаем, что мировые модели откроют новую эру в робототехнике, позволив реальным агентам ИИ помогать в быту и выполнять физические задачи без необходимости в астрономических объёмах данных для обучения ^[6] роботов», — объяснил главный научный ^[7] сотрудник Meta по ИИ Ян Лекун в своём видео.

Пользуясь случаем, хочу порекомендовать BotHub  ^[8]— платформу, где можно протестировать все популярные модели без ограничений. Для доступа к сервису не требуется VPN и можно использовать российскую карту. По ссылке ^[9] вы можете получить 100 000 бесплатных токенов для первых задач и уже сейчас начать работать!

*Meta и её продукты (Instagram, Facebook) запрещены на территории Российской Федерации

Источник ^[10]