Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Higgsfield представили нейроплагины для Adobe Premiere Pro и After Effects. Генерация видео без выхода из редактора!

Higgsfield представили два новых плагина для Adobe Premiere Pro и After Effects, которые позволяют использовать генеративные нейросети прямо внутри привычных программ для видеомонтажа. Разработчики предпочли не создавать собственный таймлайн, а интегрироваться в уже существующие профессиональные инструменты.

С помощью новых плагинов пользователи смогут генерировать визуальные эффекты, создавать генеративные переходы, выполнять рефрейминг без обрезки кадра, удалять фон, а также использовать рисование на футаже в качестве референса для генерации. Заявлена и функция апскейлинга до разрешения 4K.

Подобная прямая интеграция генеративных возможностей в профессиональное ПО выглядит логичным продолжением развития индустрии и напоминает появление нейрорендеринга или нейрокомпозитинга. Это избавляет пользователей от необходимости генерировать контент в сторонних сервисах, скачивать, импортировать и вручную подгонять материал на таймлайне.

На этом фоне возникает вопрос к компании Adobe: почему подобные инструменты до сих пор выпускает сторонний разработчик? Ранее демонстрировались наработки в области Morphcut и Firefly, а также эксперименты с chatGPT. Adobe уже отказались от эксклюзивности Firefly и применяют различные модели в своих Mood Boards. Однако простых и удобных плагинов для Premiere Pro и After Effects пока представлено не было.

Пока нет данных о том, как новые плагины Higgsfield справляются с техническими нюансами: работой с переменной частотой кадров, нестандартными аспектами, неквадратными пикселями и прочими сложностями профессионального видеопроизводства. Остаётся открытым вопрос удобства пользовательского интерфейса: для опытных монтажёров критически важно, чтобы новые инструменты органично вписывались в привычные паттерны работы с масками, слоями и инструментами закрашивания. Также предстоит оценить, как реализован механизм выбора моделей для генерации.

Несмотря на возможные текущие ограничения, направление развития выбрано верно. Даже если технология пока работает не идеально, рано или поздно подобные решения станут стандартом индустрии и могут появиться у других разработчиков.

Подробнее ознакомиться с новыми плагинами можно на официальной странице: higgsfield.ai/adobe-plugin

Этот пост Вконтакте:

Ещё новости:

Вышел Skales: полезный ИИ-агент, который запустится даже на слабом ПК.
Эндрю Ын представил open source ИИ-агента OpenWorker.
Авито запустил флешмоб: что пользователи никогда не доверят ИИ?
Любую книгу можно превратить в навык для нейросети: вышел конвертер book-to-skill.
Anthropic научит Claude проектировать процессоры.
Higgsfield выложили 95-минутный ИИ-фильм Hell Grind со всеми промптами.
Cloudflare выдал ИИ-агентам кошельки и читаемые адреса для оплаты API и контента.
Бывший сотрудник Google запустил «AI-бота», который оказался обычным человеком.
Человек с помощью Claude написал Bluetooth-радар для поиска телефона.
Бабушкины сказки от нейросетей: родители бьют тревогу.