Kandinsky 6.0 Video: генерация видео с синхронным аудио, липсинком и Full-HD апскейлом.
Видеогенератор Kandinsky 6.0 Video от Kandinsky Lab.
Основные возможности:
- видео с синхронным аудио 44 кГц и липсинком;
- генерация из текста или изображения (T2AV / TI2AV);
- Full-HD супер-резолушн отдельным пайплайном;
- дистиллированные версии для ускорения;
- две модели: Lite 3B и Pro 29B;
- 5-секундные клипы, 24 fps.
Требования к железу
- Lite 3B: около 12-15 ГБ весов, с оффлоадом помещается в 16-24 ГБ VRAM.
- Pro 29B: тяжёлая модель, один трансформер требует около 60 ГБ, нужен H100/A100 80 ГБ или пара карт.
- Full-HD апскейл добавляет нагрузку.
Стек: трансформер + Qwen2.5-VL + CLIP + видео/аудио-VAE + вокодер. Для широкого применения реалистичен Lite, а Pro подойдёт для больших карт.
Модель уже доступна на Fal. Апскейлер вынесен в отдельную модель.
Ещё новости:
