Wan 2.2 I2V теперь работает на одной RTX 5090: энтузиасты объединили экспертов с помощью LoRA и FP4.
Мы обратили внимание на любопытный инженерный проект от команды TheStage AI. Они взялись за оптимизацию видеогенератора Wan 2.2 I2V, который архитектурно состоит из двух экспертов: отвечающего за низкий уровень шума (low noise) и высокий (high noise).
Идея разработчиков заключалась в том, чтобы взять базовую модель low noise и дообучить для неё LoRA, которая имитирует поведение high noise эксперта. Таким образом, вместо двух полноценных моделей в связке используется одна модель плюс легковесная LoRA.
Сверху решения наложили ещё несколько ускорений, включая NVFP4 и FP4 attention. В итоге всё это великолепие запускается на одной видеокарте GeForce RTX 5090, сохраняя при этом высокое качество генерации. К слову, среди авторов разработки, судя по фамилиям, есть русскоязычные специалисты.
Ознакомиться с наработками и попробовать их самостоятельно можно через Hugging Face и набор узлов для ComfyUI.
Ещё новости:
