Нейросеть научилась добавлять виртуальный свет, который прячется за реальными объектами в видео.
Мы посмотрели видео, в котором нейросеть добавляет виртуальный свет, прячущийся за реальными объектами.
Нейросеть по каждому кадру определяет, что находится ближе к камере, а что дальше, и на лету строит карту глубины. Благодаря этому виртуальный источник света ведёт себя так, будто действительно находится внутри сцены: стены, люди и предметы могут перекрывать его, а освещение меняется с учётом их положения.
В перспективе это может сильно упростить спецэффекты: свет, дым и виртуальные объекты можно будет реалистично добавлять прямо в готовое видео без долгой работы с 3D.
Ещё новости:
