Музыкальные нейросети: Plenio, Gokuk, Yeufonic и обновление YuE2-ComfyUI.
Пользователи, которые хотят создавать музыку локально, получили сразу несколько интересных проектов.
Plenio 0.3
Проект Plenio-Music-Production-System объединяет описание песни, локальную LLM, YuE2 или MiniMax Music 3, сведение и мастеринг в ComfyUI без облака. В системе есть редактор партитуры (пианолла, нотация, ABC), стемы с фейдерами и эффектами, графический EQ с подбором референса, мастеринг до −14 LUFS. Шесть шаблонов, режим ревью. Refine и Stems пока экспериментальные.
Gokuk
Портативное Windows-приложение Gokuk позволяет создавать полные песни на YuE2 без ComfyUI. Есть чипы стиля, кавер с SheetSage2, редактор партитуры до генерации, библиотека. Требования: Windows 10/11, NVIDIA 12GB+, ~25GB диска. Лицензии CC BY-NC: только некоммерческое использование.
Yeufonic
Веб-приложение Yeufonic работает поверх ComfyUI/YuE2 без визуального программирования, доступно через Docker или Windows-инсталлятор, поддерживает локальное обучение LoRA.
ACE-Step + YuE2
Связка ACE-Step 1.0 и YuE2 предлагает креативный подход: ноты от ACE-Step прогоняются через YuE2, что даёт хороший звук.
LoRA для дэт-металла
На Hugging Face опубликована LoRA YuE2_Deathmetalv1_lora для любителей тяжёлой музыки.
Обновления
Вышло обновление YuE2-ComfyUI 0.12.0. Оно точнее распознаёт слова: поле language теперь не переводит русский на английский, second_hearing использует Whisper для повторного прослушивания, количество ошибок снижено с 15% до 9%. Для видеокарт RTX 20xx/GTX 16 последняя стадия работает в FP16, поэтому длинные песни доходят до конца. Исправлено падение при отмене в первую секунду.
Модель MiniMax Music 3 ужата до ~12GB в формате int8: huggingface.co/deAPI-ai/minimax-music3-11b-int8.
Ещё новости:
