Исследователи показали систему, которая способна создавать реалистичные 3D-модели городов

Исследователи представили Skyfall-GS, систему, которая способна создавать реалистичные 3D-модели городов, используя только спутниковые изображения. Технология объединяет 3D Gaussian Splatting и диффузионные нейросети, превращая снимки с орбиты в детализированные и проходимые виртуальные пространства.

Ранее большинство решений для генерации 3D-городов умели восстанавливать только крыши и базовую геометрию зданий. Skyfall-GS идёт дальше, она дорисовывает недостающие элементы, включая фасады, текстуры на уровне земли и детали городской инфраструктуры. Это делает итоговые модели не просто визуальными, а пригодными для игр, симуляций и систем навигации.

Система работает в два этапа. Сначала Gaussian Splatting формирует каркас из миллионов точек, описывающих структуру города. Затем диффузионная модель оживляет сцену, добавляя материалы, цвета и текстуры с высокой фотореалистичностью. Такой подход даёт возможность создавать точные цифровые двойники городов с минимальными исходными данными.

По тестам, Skyfall-GS превзошла аналоги по качеству восстановления деталей и при этом работает со скоростью 11 кадров в секунду на обычной видеокарте потребительского уровня. Это делает её пригодной не только для научных задач, но и для коммерческого применения.

Создатели отмечают, что проект может стать основой для будущих систем автономного вождения, моделирования урбанистики и цифровых близнецов городов.

Делегируйте часть рутинных задач вместе с BotHub! ^[1] Для доступа к сервису не требуется VPN и можно использовать российскую карту. По ссылке ^[2] вы можете получить 100 000 бесплатных токенов для первых задач и приступить к работе с нейросетями прямо сейчас!

Источник ^[3]