Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Black Forest Labs добавила точное редактирование в FLUX 3 Video.

Black Forest Labs, разработчик семейства визуальных моделей FLUX, добавила в FLUX 3 Video новый режим.

FLUX 3 Video умеет генерировать видео с синхронным звуком из текстовых описаний и изображений. Теперь модель способна редактировать уже существующие клипы по обычной текстовой команде.

Главная идея обновления в том, чтобы изменить конкретную деталь и не затронуть остальной ролик. Именно это обычно было слабым местом генеративного видеомонтажа: вместе с нужным объектом начинали меняться лицо героя, фон, свет или композиция.

Что умеет FLUX Video Edit [fast]

  • добавлять, удалять и заменять объекты или персонажей;
  • менять фон;
  • редактировать текст внутри видео;
  • менять цвета, материалы и визуальные эффекты;
  • заменять или переводить реплики с синхронизацией губ;
  • менять само событие, происходящее в кадре.

По внутренним тестам Black Forest Labs, версия [fast] находится среди лучших решений по соотношению точности и цены. Это заявление самой компании, независимого сравнения мы пока не видели.

Цена считается по длительности готового ролика и составляет $0.03 за секунду. Тип правки на стоимость не влияет.

  • 5 секунд: $0.15, около 13 ₽;
  • 10 секунд: $0.30, около 26 ₽;
  • 15 секунд: $0.45, около 38 ₽.

Есть важные ограничения. Исходный клип должен быть не длиннее 15 секунд и весить не более 50 МБ.

Длительность, соотношение сторон и частоту кадров отдельно задать нельзя, они берутся из исходника. Видео выше 720p при обработке уменьшается до 720p. Исходный звук сохраняется, если в промпте не попросить изменить диалог или звук.

На наш взгляд, это полезный шаг для производственного процесса. Вместо перегенерации сцены целиком из-за одной детали можно точечно заменить объект, надпись, фон или реплику. Мы рекомендуем проверять модель на сложных сценах с лицами, движением камеры и мелкими объектами, именно там станет понятно, насколько хорошо она действительно сохраняет всё остальное.

Редактор уже доступен в интерфейсе Black Forest Labs и через API.

Этот пост Вконтакте:

Ещё новости:

Стильный промпт для переноса артов в швейцарском стиле со строгой сеткой и броскими цветами!
Jev: новый класс ИИ для быстрых решений и лучшие проекты на GitHub!
Китайский айтишник создал топовую локальную нейронку laya-mlx и заставил её играть в «Змейку».
Теренс Тао: темпы развития ИИ стали слишком быстрыми!
Лучшая 4D-визуализация движений: Gemini, Codex и three.js растянули время.
Китайская ботоферма с ИИ-роботом и физическим «пальцем» обходит проверки соцсетей.
ChatGPT и Claude ошибаются в финансовых вопросах в 57% случаев.
ChatGPT якобы сам отправил письмо в ФБР через Gmail пользователя.
«Ты же говорил, что так можно»: как ИИ выручает бухгалтеров на 1С и их руководителей.
GuppyLM: языковая модель на 9 млн параметров обучается с нуля за пять минут.