Исследователи представили Bang — нейросеть для декомпозиции 3D-моделей

Исследователи из Китая представили ^[1] Bang — нейросеть для декомпозиции 3D-моделей без потери геометрической и семантической целостности. Разработку можно использовать, например, для разделения больших моделей на удобны для печати фрагменты.

Главная проблема существующих нейросетей для генерации 3D-моделей в том, что они создают монолитные объекты. Их можно генерировать быстро и в сравнительно высоком качестве, но использовать в проектах их не выйдет. Монолитные модели сложно анимировать, дорабатывать и переделывать.

Решением проблемы, по мнению исследователей, может стать нейросеть, которая точно декомпозирует трёхмерные объекты на фрагменты. Bang для этой задачи использует диффузионную модель и сама решает, как именно разделять объект. Также есть возможность расширить возможности нейросети. Например, можно интегрировать языковую модель, чтобы пользователи могли на естественном языке описывать, на какие именно фрагменты делить 3D-фигуру.

На выходе нейросеть выдаёт набор готовых фрагментов, которые можно редактировать, анимировать, печатать и интегрировать в игры или приложения. 

Более подробно про метод декомпозиции Bang можно узнать в документе ^[2] исследования. В ближайшее время разработчики планируют выпустить публичное демо.