Code as Policy: как LLM управляет роботом через сгенерированный код
Привет, Хабр! Сегодня мы поговорим о том, как нейросети могут эффективно управлять роботами, используя не самый очевидный на первый взгляд подход.В 2023 году Alphabet закрыл проект Everyday Robots, в котором пытались создать робота для уборки офисов и сортировки мусора. Увы, андроиды оказались не способны выполнять задачи в сложной и изменчивой обстановке естественной человеческой среды. Но благодаря этой попытке появилась технология Code as Policy (CaP)
Камера на лоб, газировка в подарок: как человечество снимает самоучитель для роботов
Вы наверняка видели ролики, где индийские швеи работают за станками с экшен-камерами на лбах или парикмахер стрижет с GoPro, закрепленной на груди. За такой, как может показаться, фрик-контент платят зарплату, ведь каждое видео уходит в обучающую выборку робота, который однажды сделает то же самое без человека. Под катом расскажу, кто собирает данные для гуманоидов, сколько за это платят и при чем тут «Яндекс» и «Сбер».
Телеуправление, симуляции и камеры на кепках: как добывают данные для обучения роботов
Языковые модели поумнели во многом благодаря масштабу: их обучали на десятках триллионов токенов текста, который человечество накопило в интернете. У робототехники такого запаса нет: никто не выкладывал в сеть миллионы часов записей того, как робот складывает рубашку или наливает воду. Каждый такой час приходится записывать с нуля.
Роботы научились считывать сигналы мозга для предотвращения ошибок в реальном времени
Исследователи из Университета штата Оклахома пытаются решить проблему ошибок в работе робототехники, обучая машины реагировать на человеческие инстинкты в режиме реального времени. Команда разрабатывает нейроадаптивную систему управления, которая позволяет роботам улавливать сигналы из человеческого мозга и мгновенно корректировать свои действия. Таким образом, если оператор-человек чувствует, что что-то идёт не так, робот должен отреагировать до того, как ошибка возникнет в реальном мире.
В Китае робот Xueba 01 приступил к занятиям в аспирантуре шанхайского университета
В Китае гуманоидного робота Xueba 01 зачислили в качестве студента в аспирантуру Шанхайского театрального института. В течение следующих четырёх лет он будет учиться по специальности «Дизайн цифровых представлений» на факультете сценических искусств.
Skild Brain: единая модель для управления любыми роботами
Робототехнический стартап Skild AI, поддерживаемый Amazon и SoftBank, представил фундаментальную ИИ-модель под названием Skild Brain. Эта разработка призвана решить одну из самых сложных проблем в индустрии: отсутствие универсальных данных для обучения роботов сложным физическим действиям.
Google установила две роборуки для бесконечной игры в настольный теннис
В Google DeepMind установили пару роботизированных рук для бесконечной игры в настольный теннис. Цель этого проекта, начатого в 2022 году, — дать двум роботам возможность непрерывно учиться друг у друга посредством соревнования.
