Делаем 3D ассеты: ChatGPT + Blender

Продолжаем эксперемнтировать с 3D-моделлингом. В сегодняшнем эксперименте зарекрутируем таланты ChatGPT 5 ^[1], чтобы он написал готовые скрипты для Блендера.

Блендер сюрприз

В западном интернете все чаще обсуждается воркфлоу, суть которого проста: ЛЛМ, обычно в этом контексте фигурирует Claude Opus, прикручивают к Blender’у с помощью MCP-коннектора. 

Краткая справка: MCP, он же Model Context Protocol, играет роль специальной смычки, помогающей ИИ напрямую коннектиться к внешним базам данных, сайтам и сторонним сервисам. С помощью MCP, ИИ можно дать доступ к инструментарию, в которым мы обычно работаем ручками.

Но сегодня, для чистоты, эксперимента мы пойдем хардкорным путем и будем генерировать скрипты на Питоне, которые затем будут скармливать Блендеру, чтобы посмотреть на сколько жизнеспособным получится результат.

Жанр игры: средневековое около-фэнтези в лоуполи стилистике. Предметы выбирались случайно.

Промты писались сразу на русском языке с максимально простым описанием ассета по типу:

“Напиши скрипт для Блендера. Это 3D-модель деревянного, англо-саксонского щита, усеянного стрелами с лицевой стороны. Это игровой ассет. Стилистика: ретро-лоуполи графика”.

Круглый щит со стрелами

Скрипт для щита была написан, приблизительно, за 2 минуты. Примерно полминуты Блендер рендерил ассет.

В принципе, для начала нулевых, наверно выглядит неплохо, хотя и грубовато. Некоторый англосаксонский антураж тоже присутствует.

Настольная лампа

Снова короткий промт и Блендер рендерит такую модель:

Почему-то ЧатГПТ ушел в ориенталистский колорит и написал скрипт для арабской лампы Алладина. Видимо, при амбивалентных коннотациях нужно всегда писать уточняющие ремарки.

Исправленный вариант:

Выглядит лампово хотя, опять же, по-черновому.

Арбалет

После введения промта ГПТ сочинил собственную версию арбалета, больше похожую на пистолет с тетивой.

Просим у ГПТ классический европейский фасон оружия:

Пушка на колесах

Пушку хотелось сделать уже поинтереснее, со всевозможной орнаменталистикой, например львиной головой, украшающей зев пушечного дула. ЧатуГПТ был дан промт написать скрипт с хорошо детализированной моделью, текстурами металла, дерева, копоти и грязи и, конечно, кованной львиной головой в качестве вишенки на торте.

Собственной, результат:

Ну это вообще пушка: надувная артиллерия готова к бою! Несмотря на детализированный и хорошо прописанный промт, ГПТ задачу не осилил от слова совсем. Попытки перепилить пушку с прикрепленными картинками-референсами уже в хайполи привели к такому результату:

Со сложными, высоко детализованными хайполи-моделями такой воркфлоу закономерно не работает. Ну или нужно искать более сложный алгоритм генерация -> рендеринг, чтобы получать результат пореалистичнее.

Трон с черепами

Здесь восседает главнекромант. Ну или его заместитель:

Низкополигональные ассеты, которые выдает ЧатГПТ в плане стилистики отдаленно напоминают игру Finn & Jake Investigations. И в принципе для кого-то психоделического инди-квеста в пост-ироничных тонах такая статичная декорация могла бы подойти.

Кристаллы маны

ЧатГПТ сходу дал им RGB-подсветку магическо-фиолетовую окраску а-ля light purple.

Алхимическая башня

Башенка, похожая на фломастер, получилась совсем уж маленькой, что, конечно, поправимо скейлингом, но все же.

Скелет-узник

Увы, видимо ЛЛМ пока что слабо представляет себе как работает естественное взаимодействие шляпа + голова: здесь бы не помешала, наеврное, общая сетка скрепляющая два объекта и деформация шляпной ткани для натуралистичности.

Руины

Поскольку в первом промте указан сеттинг фэнтези (и почти все генерировалось в непрерывном диалоговом окне), ЧатГПТ решил добавить загадочно парящий конус в воздухе. Видимо это какой-то кристалл левитации.

Каменный грифон

Опять же, не смотря на описание модели, ГПТ проигнорировал все пожелания, изготовив шаровидного грифона с носом-сарделькой. Отдельного комплимента можно удостоить его великолепный круп:

Это грифонов круп или Копатыч из “Смешариков”?

Деформация грифона, конечно, была возмутительной и после некоторого допиливания удалось, хотя бы, убрать сарделеобразный клюв, ставший более-менее похожим на птичий. А также соблюсти симметрию ^[2] крыльев:

Столик из таверны

Из-за простоты геометрических форм, мебель получается лучше. По середине еще и фактурный, красноречиво воткнутый нож. Иногда ГПТ выдает интересные находки.

Бронированная лошадь

Лошадь прошла несколько стадий свиборгизации. Пока неясно как нужно прописывать промт, чтобы модель получилась анатомически реалистичной. Но выяснить будет интерсно.

Сокровищница

Почему-то в первой версии мы получаем некие около-эллипсоидные конструкции, похожие то ли на гигантские ириски Меллер, то ли на силуэт Шедбаршемот Шертатана  Чебурашки.

После допиливания промта удалось получить чуть более вменяемую картинку (но очебурашенность золотых залежей осталась):

Вывод: ЛЛМ имеет смысл применять в Блендере для моделирования черновых, грубых заготовок, дополивание коих руками неизбежно в любом случае. Также, наверно, стоит опробовать пайплайны с другими ЛЛМ и посмотреть какой выхлоп способны продуцировать их промты. 

Пока что, по крайней мере для статичных 3D-моделей, лучше всего справляется генерация исходных референсов в Nano Banana Pro ^[3] или Krea 2 ^[4] с последующей прогонкой через модели по типу Meshy.