Sony экспериментирует с персонажами для PlayStation на базе ИИ

Sony работает ^[1] над прототипом по крайней мере одного из персонажей игры PlayStation на основе искусственного интеллекта ^[2]. Это будет персонаж Элой из Horizon Forbidden West. 

Внутренним видео тестирования игры поделился с журналистами анонимный информатор. Однако вскоре после публикации его удалили из YouTube из-за иска от компании по защите авторских прав Muso, которая рекламирует Sony Interactive Entertainment в качестве клиента.

Видео озвучивает директор по разработке программного обеспечения в Sony Interactive Entertainment Шарвин Рагобардахал, который работает над технологиями видеоигр, ИИ, компьютерным зрением ^[3] и технологией лиц для PlayStation Studios Advanced Technology Group Sony. Он демонстрирует версию Элой, работающую на основе ИИ, которая может поддерживать разговор с игроком с помощью голосовых подсказок.

Элой отвечает на запросы с помощью синтезированного голоса и демонстрирует изменения мимики. Рагобардаджал отметил, что пока это лишь прототип, который был разработан совместно с Guerrilla Games для внутреннего тестирования технологии в Sony. Разработчики использовали инструмент Whisper от OpenAI для преобразования речи в текст, а также модели GPT-4 и Llama 3 для поддержания беседы и принятия решений. По словам Рагобардаджал, у Sony есть собственная внутренняя система эмоционального синтеза голоса (EVS), которую компания использует для генерации речи, а анимация мимики также работает на основе собственной технологии Sony Mockingbird.

Хотя демонстрация запущена на ПК, Sony также экспериментировала с запуском элементов технологии непосредственно на консолях PS5 с «небольшими дополнительными расходами». 

Nvidia также работает ^[4] над технологией Avatar Cloud Engine (ACE) для NPC с искусственным интеллектом в играх, которая позволит свободно разговаривать с персонажами. Компания сотрудничала с Inworld AI для создания Covert Protocol, технической демонстрации игровой технологии. Первой игрой с поддержкой ACE станет ^[5] Mecha Break, релиз которой запланирован на 2025 год. На выставке CES 2025 компания показала ^[6], что такие NPC могут быть «автономными игровыми персонажами». Ожидается, что в этом году также появится напарник в PUBG, который поможет игрокам.

Microsoft же тесно сотрудничает с Inworld AI, чтобы в конечном итоге перенести персонажей с искусственным интеллектом на Xbox. Компания уже создала ^[7] собственную модель Muse AI, которая генерирует игровой процесс.

Разработчики игр и студии уже испытывают опасения по поводу того, как ИИ может повлиять на творческий процесс создания видеоигр. 49% из 3000 респондентов опроса Game Developers Conference в 2024 году заявили ^[8], что в настоящее время на их рабочем месте используются инструменты генеративного ИИ, а 31% отметил, что использует их лично.