Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Создание нейросетевого мультфильма в стиле «Аркейна» обошлось в 25 тысяч рублей.

Идея заключалась в том, чтобы создать динамичную приключенческую историю с интересным сюжетом. Хотелось воплотить концепцию стимпанка в мире сказок на Руси.

Эта история не только про взаимоотношения двух братьев, но и про личностный конфликт. Герой не любит себя, живет в вымышленном мире, где он является супергероем, а точнее мощным богатырем. Он хочет быть таким и наяву, в том числе для своего брата, но внутренняя неуверенность ему мешает. Как итог, его внутреннее желание доказать себе и окружающим, что он чего-то стоит, приводит к трагичным событиям.

В качестве референса для стиля изображений был выбран анимационный сериал «Аркейн».

Инструменты

  • Higgsfield. Итого было потрачено примерно 5800 кредитов, что составило около 25 тысяч рублей (вышло дороже, чем могло, из-за того что кредиты покупались дополнительно к подписке, что выходит дороже).
  • Генерация изображений происходила в Higgsfield, а именно в Cinema Studio. В ChatGPT был сгенерирован единый стилевой промпт на основе пачки изображений. Также генерация усиливалась визуальными референсами. Было сгенерировано около 600-700 изображений (в том числе генерации на редактирование изображений в NanoBanano).
  • Ретушь изображений происходила в Photoshop.
  • Генерация видео была на модели Sidance 2, большинство кадров было сгенерировано в качестве 1080р для достижения более качественной и стабильной картинки. Можно было использовать Kling, но он слишком искажал картинку, поэтому было решено не экономить и сделать более приемлемый результат. Sidance 2 хорошо понимает стиль «Аркейна», держится хорошо даже в динамичных сценах. Есть проблемы с анимацией людей на фоне, мы пробовали множество вариантов и выбрали лучшие результаты в видео.
  • Озвучка была сгенерирована в ElevenLabs. Считаем это самой слабой стороной видео, несмотря на использование одного из самых топовых сервисов для генерации аудио.
  • Липсинг делался через описание в промпте фраз, которые необходимо персонажу произнести. При этом описывались эмоции, которые персонаж должен испытать. После этого мы генерировали озвучку и примерно подгоняли её под движение губ.
  • Монтаж делался в Premiere Pro. В монтаж вошли: склейка, чистка склеек, редактирование незначительно искаженных видеофрагментов, саунд-дизайн, музыка, наложение озвучки. Всё было сделано своими силами, без привлечения дополнительных специалистов.

Сроки

  • Поиск идеи, сбор мудборда, написание сценария, редактирование написанного сценария, подготовка раскадровки заняли 2 недели.
  • Создание всех статичных сцен, включая отбор, ретушь и фильтрацию, заняло 2 недели.
  • Анимация всех статичных сцен выполнена за 3 дня.
  • Финальная сборка: монтаж, звук, постобработка заняла 3 дня.

Все процессы выполнялись последовательно. Суммарно работа проводилась в период с 28 мая по 4 июля.

Этот пост Вконтакте:

Ещё новости:

Вышел Skales: полезный ИИ-агент, который запустится даже на слабом ПК.
Эндрю Ын представил open source ИИ-агента OpenWorker.
Авито запустил флешмоб: что пользователи никогда не доверят ИИ?
Любую книгу можно превратить в навык для нейросети: вышел конвертер book-to-skill.
Anthropic научит Claude проектировать процессоры.
Higgsfield выложили 95-минутный ИИ-фильм Hell Grind со всеми промптами.
Cloudflare выдал ИИ-агентам кошельки и читаемые адреса для оплаты API и контента.
Бывший сотрудник Google запустил «AI-бота», который оказался обычным человеком.
Человек с помощью Claude написал Bluetooth-радар для поиска телефона.
Бабушкины сказки от нейросетей: родители бьют тревогу.