WorldSculpt превращает фото сцены в сотни отдельных 3D-моделей.
Рассказываем о фреймворке WorldSculpt, который создали Alaya Lab и Токийский университет. Он превращает фотографии насыщенных объектами сцен в десятки и сотни отдельных 3D-моделей. Каждый объект становится самостоятельной моделью со своей сеткой. В основе решения лежит дообученная версия модели Pixal3D.
Ключевые возможности
- Работает не только с фотографиями, но и с облаком точек, которое создали другие генераторы в формате 3DGS, и превращает его в нормальные сетки.
- Встроен интерактивный просмотрщик.
- Поддерживается до сотен объектов на сцену.
- Модель обучается на отдельных объектах, но работает на целых сценах без дополнительной оптимизации.
Исходный код и материалы доступны на GitHub и в Hugging Face.
Ещё новости:
