Manga2Animate: агентный пайплайн превращения манги в анимацию.
Проект Manga2Animate представляет агентную схему превращения манга-страниц в анимацию.
Прямая подача страниц в видеомодель ломает раскладку панелей и сюжет, а работа только по тексту теряет персонажей и стиль.
Как устроен пайплайн
- Нарезка страниц на панели и распознавание реплик по порядку чтения.
- Сначала сценарий, потом раскадровка, затем видео.
- Каждый шаг делает агент-создатель, проверяет ревьюер по исходным панелям.
- Два круга правок, по 3 варианта сценария и раскадровки за круг.
- Отбор лучших клипов и склейка в цельный ролик.
Детали
- 6 панелей на кейс, 2 круга уточнения.
- Видео на MiniMax-H3, Index-AniSora, Seedance 2.0, Wan 2.7.
- Раскадровка на Gemini или локально на FLUX.2-dev.
- Агенты работают через Vertex AI или обычный ключ API.
Парное сравнение раскадровок проходит по 13 критериям, часть из которых является жестким условием «проход или не проход». Пользовательское исследование охватило 37 человек. Код открыт, данные оценки выложены.
Ещё новости:
