Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Black Forest Labs добавила точное редактирование в FLUX 3 Video.

Black Forest Labs, разработчик семейства визуальных моделей FLUX, добавила в FLUX 3 Video новый режим.

FLUX 3 Video умеет генерировать видео с синхронным звуком из текстовых описаний и изображений. Теперь модель способна редактировать уже существующие клипы по обычной текстовой команде.

Главная идея обновления в том, чтобы изменить конкретную деталь и не затронуть остальной ролик. Именно это обычно было слабым местом генеративного видеомонтажа: вместе с нужным объектом начинали меняться лицо героя, фон, свет или композиция.

Что умеет FLUX Video Edit [fast]

  • добавлять, удалять и заменять объекты или персонажей;
  • менять фон;
  • редактировать текст внутри видео;
  • менять цвета, материалы и визуальные эффекты;
  • заменять или переводить реплики с синхронизацией губ;
  • менять само событие, происходящее в кадре.

По внутренним тестам Black Forest Labs, версия [fast] находится среди лучших решений по соотношению точности и цены. Это заявление самой компании, независимого сравнения мы пока не видели.

Цена считается по длительности готового ролика и составляет $0.03 за секунду. Тип правки на стоимость не влияет.

  • 5 секунд: $0.15, около 13 ₽;
  • 10 секунд: $0.30, около 26 ₽;
  • 15 секунд: $0.45, около 38 ₽.

Есть важные ограничения. Исходный клип должен быть не длиннее 15 секунд и весить не более 50 МБ.

Длительность, соотношение сторон и частоту кадров отдельно задать нельзя, они берутся из исходника. Видео выше 720p при обработке уменьшается до 720p. Исходный звук сохраняется, если в промпте не попросить изменить диалог или звук.

На наш взгляд, это полезный шаг для производственного процесса. Вместо перегенерации сцены целиком из-за одной детали можно точечно заменить объект, надпись, фон или реплику. Мы рекомендуем проверять модель на сложных сценах с лицами, движением камеры и мелкими объектами, именно там станет понятно, насколько хорошо она действительно сохраняет всё остальное.

Редактор уже доступен в интерфейсе Black Forest Labs и через API.

Этот пост Вконтакте:

Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.