Runway представила модель ShapeUp для редактирования 3D-объектов по референсным изображениям.
Команда исследователей, включая специалистов из Runway, представила проект ShapeUp — модель для редактирования существующих 3D-моделей на основе референсного изображения.
Это собственная модель, обученная с нуля. В качестве входных данных система принимает исходную 3D-модель и картинку с желаемыми изменениями, например, где объекту добавлен меч или изменён стиль на пиксельный, как в Minecraft. На выходе получается отредактированная 3D-модель.
Детали о работе с топологией сетки пока не до конца ясны, однако разработчики отмечают, что области модели, не затронутые редактированием, остаются неизменными.
Проект интересен тем, что концепция моделей для редактирования, ранее применявшаяся к изображениям, теперь распространяется на трёхмерные объекты. Авторы ссылаются на так называемый «Горький урок», уже извлечённый из области редактирования изображений.
Ознакомиться с проектом можно на специальной странице.

