Энтузиаст показал, как с помощью нейросетей оживить песню Пугачевой в стилистике мультфильмов 90-х.

Режиссер и креативный продюсер AI-студии TAINA Стас Ахунов создал анимационный клип на песню Аллы Пугачевой «Кафе Танцующих Огней» в стилистике мультфильмов 90-х. В работе над проектом он использовал несколько нейросетей и инструментов.

Музыкальный кавер был создан в Suno ещё зимой. Трек получился с живым вокалом и качающим ритмом, что вдохновило автора на визуализацию. Идея заключалась в том, чтобы поместить персонажа Аллы Борисовны в анимацию в духе мультиков 90-х, сохранив нуарный рисованный вайб таких сериалов, как «Черный плащ», «Бэтмен» и «Черепашки-ниндзя».

На тесты и поиск стилистики ушло три-четыре дня. Сначала пробовали более современный 3D-стиль, но картинка теряла нужную атмосферу. В итоге остановились на аналоговой анимации 90-х. Большинство кадров генерировали в Nano Banana, которая лучше улавливала стиль. Сториборды делали в GPT Image 2, но эта модель держала стиль хуже, и на кадрах появлялись шумы, переходящие в видео.

История не была полностью прописана заранее. Начали с одной сцены: персонаж Аллы едет на чёрном авто по альтернативной ночной Москве. Затем появились кафе и загадочная история внутри. В середине работы добавили саспенс, вспомнив про мутаген из «Черепашек-ниндзя». Вокруг этого выстроили сюжет, добавили злодея в маске и загадочности.

Для генерации видео использовали безлимитный тариф Runway. Совместно с коллегой написали скрипт в Claude Code: он проверял завершение генерации, менял промпты и референсы, нажимал кнопку «Сгенерировать». Так была организована очередь из кадров. Несколько ночей загружали по 15-20 промптов, утром просматривали результат. Всего получилось более 200 генераций по 15 секунд в модели Gen-2. Из них отобрали материал на клип длиной 4 минуты 43 секунды и отдельно смонтировали тизер на 30 секунд.

Монтаж выполнен в Final Cut Pro X. Апскейл до 4K сделан с помощью Topaz внутри Runway. Цвет, зерно и аналоговое свечение добавлены с помощью Dehancer.

Когда основные генерации были готовы, автор решил, что не хватает отсылок. Он посмотрел несколько документальных работ о Пугачёвой и дополнительно сгенерировал и расставил пасхалки к другим её песням. В ролике можно найти отсылки к «Миллиону алых роз», песне «Робот» и другим. Отдельно использован факт, что в советское время женщинам-композиторам было сложно пробиться, и Алла Борисовна для части своих произведений использовала мужской псевдоним Борис Горбонос. Его плакат можно найти в клипе.

Если считать все подписки за один месяц, расходы составили: Runway с безлимитным Gen-2 и GPT Image 2 - $100, Higgsfield около $30 (годовой тариф), Claude и ChatGPT - по $20, Suno - около $12 (годовой премьер со скидкой). Итого около $180 при работе в один месяц. На практике проект создавался сессиями на протяжении нескольких месяцев, поэтому реальные затраты оказались немного больше.

Некоторые кадры вышли не идеально: нейросеть где-то написала слова на зданиях с ошибками, есть артефакты. Проект несколько месяцев лежал на монтажном столе, но автор решил выпустить его как есть, без сложного клинупа каждого кадра.

Главный вывод: всегда лучше заранее определиться с арт-дирекшеном и историей, а потом генерировать. Когда история рождается на ходу, процесс интересный, но затратный по времени и ресурсам. На генерации и тесты уходит в разы больше времени.