Skywork обновил интерактивный видеогенератор миров Matrix-Game 3.0!
Компания Skywork представила обновлённую версию своего интерактивного видеогенератора Matrix-Game 3.0.
Модель генерирует видео в реальном времени, учитывая долговременную память и действия пользователя. Память работает с учётом позиции камеры, что обеспечивает согласованность видео во времени. Вывод видео был ускорен за счёт методов дистилляции и квантизации.
Производительность системы достигает 40 кадров в секунду при разрешении 720p при использовании модели объёмом 5 миллиардов параметров. Увеличение модели до 14 миллиардов параметров, как сообщается, улучшает качество и динамику генерируемого контента.
Исходный код и модели доступны на платформах GitHub, Hugging Face и ModelScope.
Ещё новости:
