Дикий Запад нейросетей. Comfy Engine уже стал операционной системой, но пора ли строить заводы?
Люди создают множество надстроек поверх ComfyUI. Здесь и монтаж, и композитинг, и работа со звуком.
Под капотом находится ComfyUI как движок или даже как операционная система. А сверху энтузиасты добавляют интерфейсы всех цветов и размеров для решения уже известных задач, таких как монтаж.
Мы видим две проблемы.
- ComfyUI — плохой движок. Дырявый, медленный, неоптимальный, с родовыми травмами (это когда проще переписать, чем поправить). Просто исторически так сложилось, что его начинал писать энтузиаст и ни о каком продукте речь не шла.
- Энтузиасты пишут пестрые интерфейсы — кто во что горазд. И эти интерфейсы, мягко говоря, доморощенные.
И у нас сейчас такой Дикий Запад. Генерация видео сильно перевернула представление о пайплайне. Новые стартапы и энтузиасты неистово пишут новые инструменты из несовершенных материалов. Старые игроки, типа Adobe и Autodesk, не раздупляются и не допиливают годами устоявшиеся интерфейсы с огромной юзербазой под особенности генеративного контента.
Где-то посередине находится Blender, к которому пишут плагины (но тоже энтузиасты).
И вот мы имеем ComfyUI как движок и несовершенные материалы как инструменты.
Скорей бы уже индустриальная революция, Дикий Запад — это конечно весело, но может пора заводы строить?
Ссылки на примеры:
Обсуждение LTX Video Builder UI
Видеодемонстрация

