Microsoft показала нейросеть, которая может похоронить классический 3D-рендеринг. 3D-рендеринг.. 3D-рендеринг. microsoft.. 3D-рендеринг. microsoft. microsoft research.. 3D-рендеринг. microsoft. microsoft research. render.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ. искусственный интеллект.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ. искусственный интеллект. Машинное обучение.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ. искусственный интеллект. Машинное обучение. машинное+обучение.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ. искусственный интеллект. Машинное обучение. машинное+обучение. научно-популярное.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ. искусственный интеллект. Машинное обучение. машинное+обучение. научно-популярное. нейросети.. 3D-рендеринг. microsoft. microsoft research. render. Блог компании BotHub. Будущее здесь. ИИ. искусственный интеллект. Машинное обучение. машинное+обучение. научно-популярное. нейросети. рендеринг.
Microsoft показала нейросеть, которая может похоронить классический 3D-рендеринг - 1

Microsoft Research представила революционную разработку — RenderFormer, нейросеть, способную выполнять все ключевые задачи компьютерной графики без традиционных методов вроде трассировки лучей или растеризации. Впервые в истории 3D-рендеринг полностью передан на плечи ИИ.

RenderFormer обучена работать с любыми трёхмерными сценами и воспроизводить реалистичное глобальное освещение, тени, отражения и передачу материалов. Вместо привычных вычислений через графический движок модель получает на вход сцену, закодированную в виде набора треугольников с информацией о геометрии, нормалях и свойствах поверхности.

 Архитектура RenderFormer

Архитектура RenderFormer

Даже источники света описываются в этом формате. Далее два трансформера берут на себя разные роли: один отвечает за эффекты, не зависящие от угла обзора, а другой — за отражения и блики. На выходе нейросеть формирует изображение, которое по качеству сопоставимо с результатами профессионального рендеринга.

Эффекты рендеринга, не зависящие от точки обзора, декодируются непосредственно из трансформатора, не зависящего от точки обзора, включая рассеянное освещение и грубые эффекты теней

Эффекты рендеринга, не зависящие от точки обзора, декодируются непосредственно из трансформатора, не зависящего от точки обзора, включая рассеянное освещение и грубые эффекты теней

Обучение модели проходило на огромном наборе Objaverse, где собраны сотни тысяч трёхмерных объектов. Сначала нейросеть тренировалась на низком разрешении, затем постепенно переходила к более сложным сценам. По данным исследователей, RenderFormer не только воспроизводит физически корректные эффекты, но и делает это быстрее и эффективнее многих традиционных алгоритмов.

Визуализация выходов внимания

Визуализация выходов внимания

Конечно, технология пока не лишена ограничений. Работа с очень сложными сценами требует огромных вычислительных ресурсов, а стабильность результата ещё не всегда идеальна. Но для экспертов по компьютерной графике очевидно: мы стоим на пороге новой эпохи, где искусственный интеллект может стать полноценным заменителем классических рендер-движков.

Rendered results of different 3D scenes generated by RenderFormer
Rendered results of different 3D scenes generated by RenderFormer

Если RenderFormer удастся масштабировать и сделать доступным в индустриальных масштабах, последствия будут колоссальными. От игровой индустрии и кино до виртуальной реальности и робототехники — везде, где требуется реалистичная графика, появится возможность создавать её быстрее, дешевле и с меньшими затратами энергии. В Microsoft уверены: нейронный рендеринг станет следующим стандартом, а RenderFormer уже сегодня показывает, как может выглядеть будущее компьютерной графики.


Хотите быть в курсе важных новостей из мира ИИ? Подписывайтесь на наш Telegram‑канал BotHub AI News.

Источник

Автор: cognitronn

Источник

Rambler's Top100