ByteDance выпустила ИИ-агента, который часами проходит 3D-игры
Компания ByteDance представила Lumine – ИИ-агента, который может самостоятельно выполнять сложные многочасовые миссии в 3D-играх, таких как Genshin Impact, Honkai: Star Rail и Wuthering Waves. В отличие от большинства аналогов, Lumine обрабатывает видеопоток с экрана и генерирует команды для клавиатуры и мыши в реальном времени.
Агент построен на базе Qwen2-VL-7B и обучался на 1700 часах человеческого геймплея. Процесс обучения [1] проходил поэтапно: сначала освоение базовых действий, затем следование инструкциям, и, наконец, развитие адаптивного мышления [2] на небольшом наборе задач на логическое рассуждение.
В тестах Lumine демонстрировал умение:
• эффективно сражаться с боссами, используя тактику;
• решать головоломки;
• взаимодействовать с NPC;
• переносить навыки на новые локации и даже незнакомые игры без дополнительного обучения.
По мнению разработчиков, ключевой вклад Lumine – это универсальность и автономность. Агент способен обучаться на опыте [3] человека, адаптироваться к новым условиям и обеспечивать высокую эффективность в динамических виртуальных мирах. Это открывает перспективы для использования подобных ИИ-агентов в тестировании игр, автоматизации тренировочных сценариев и создании интерактивного контента.
Делегируйте часть рутинных задач вместе с BotHub! [4] Для доступа к сервису не требуется VPN и можно использовать российскую карту. По ссылке [5] вы можете получить 100 000 бесплатных токенов для первых задач и приступить к работе с нейросетями прямо сейчас!
Источник [6]
Автор: cognitronn
Источник [7]
Сайт-источник BrainTools: https://www.braintools.ru
Путь до страницы источника: https://www.braintools.ru/article/21914
URLs in this post:
[1] обучения: http://www.braintools.ru/article/5125
[2] мышления: http://www.braintools.ru/thinking
[3] опыте: http://www.braintools.ru/article/6952
[4] BotHub!: https://bothub.chat/?utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_source=contentmarketing&utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_medium=habr&utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_campaign=news&utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_content=LUMINE%20BY%20BYTEDANCE:%20AI%20AGENT%20CAPABLE%20OF%20PLAYING%203D%20GAMES%20FOR%20HOURS
[5] По ссылке: https://bothub.chat/?invitedBy=m_aGCkuyTgqllHCK0dUc7
[6] Источник: https://www.lumine-ai.org/
[7] Источник: https://habr.com/ru/companies/bothub/news/966342/?utm_source=habrahabr&utm_medium=rss&utm_campaign=966342
Нажмите здесь для печати.