Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

MiniMax-H3 доступен в ComfyUI с первого дня: 2K-видео со звуком на RTX 3060.

Модель MiniMax-H3 от MiniMax получила поддержку в ComfyUI с первого дня. Теперь запустить генерацию 2K-видео со стереозвуком можно даже на видеокарте GeForce RTX 3060, благодаря серьёзной оптимизации памяти и динамическому оффлоадингу VRAM.

Omni-модальная система MiniMax-H3

MiniMax-H3 — это 33-миллиардная модель, работающая с текстом, изображениями, видео и аудио в любых комбинациях. На выходе она выдаёт видео длительностью от 4 до 15 секунд (24 кадра в секунду) с нативным стереозвуком 32 кГц, генерируемым в том же проходе. Разрешение по умолчанию — 768p, а через режим H3-Regenerate-2K его можно повысить до полноценного 2K. Поддерживаются соотношения сторон от 21:9 до 9:16.

Доступные режимы:

  • Text-to-Video — только текстовое описание (через H3-Base-FL2VA без стартовых изображений).
  • Image-to-Video — анимация одного кадра как первого или последнего.
  • First-and-Last-Frame — задаются открывающий и закрывающий кадры, модель достраивает промежуток.
  • Reference-to-Video (Ref2VA) — перенос субъекта, движения или голоса из референсов: можно загрузить до 9 изображений, 3 видеоклипов (по 2–15 секунд, суммарно не более 15 с) и 3 аудиореференсов (аудио загружается только вместе с изображением/видео), всего до 12 файлов.
  • In-context Regeneration — апскейл до 2K через H3-Regenerate-2K.

Также реализован motion transfer: опорное видео задаёт движение камеры, манеру съёмки или ритм монтажа, а содержание и стиль черпаются из других модальностей.

Локальный запуск на RTX 3060

Инженерам из сообщества ComfyUI удалось сократить потребление памяти на 66%: с 123,6 ГБ в полной точности до 42,5 ГБ у оптимизированных вариантов. Благодаря динамическому оффлоадингу видеопамяти генерация 2K-видео становится реальной даже на массовой GeForce RTX 3060.

Как попробовать

Чтобы запустить MiniMax-H3 самостоятельно, выполните несколько шагов:

  1. Обновите ComfyUI до версии 0.30.0 либо воспользуйтесь Comfy Cloud.
  2. Скачайте один из готовых рабочих процессов (они доступны в библиотеке шаблонов): MiniMax H3 T2V Workflow для текста, MiniMax H3 I2V Workflow для изображений и MiniMax H3 R2V Workflow для референсов.
  3. Загрузите веса модели по инструкции внутри workflow. Основной репозиторий: Comfy-Org/MiniMax-H3.
  4. Напишите промпт, подключите кадры или референсные входы и запустите генерацию.

Полезные ссылки:

Этот пост Вконтакте:

Ещё новости:

Вышел Skales: полезный ИИ-агент, который запустится даже на слабом ПК.
Эндрю Ын представил open source ИИ-агента OpenWorker.
Авито запустил флешмоб: что пользователи никогда не доверят ИИ?
Любую книгу можно превратить в навык для нейросети: вышел конвертер book-to-skill.
Anthropic научит Claude проектировать процессоры.
Higgsfield выложили 95-минутный ИИ-фильм Hell Grind со всеми промптами.
Cloudflare выдал ИИ-агентам кошельки и читаемые адреса для оплаты API и контента.
Бывший сотрудник Google запустил «AI-бота», который оказался обычным человеком.
Человек с помощью Claude написал Bluetooth-радар для поиска телефона.
Бабушкины сказки от нейросетей: родители бьют тревогу.