PhysForge: фреймворк создаёт 3D-ассеты с реалистичной физикой для симуляций роботов.
Исследователи представили PhysForge — фреймворк для генерации трёхмерных ассетов с учётом физики. Решение применимо в симуляциях роботов и виртуальных мирах, где объекты сразу готовы к взаимодействию.
Фреймворк принимает на вход изображение, опциональную 2D-маску и воксели TRELLIS. Далее происходит три этапа:
- создаётся иерархический физический чертёж через VLM, включающий ограничивающие рамки, связи частей, типы соединений и свойства;
- генерируется детализированная геометрия и текстуры с помощью диффузионной модели;
- задаются точные кинематические параметры (ось движения, пределы и так далее) через механизм KVI.
Код выложен на GitHub.
Ещё новости:
