Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Hedra представила модель Omnia для генерации аватарных видео с контролем камеры.

Компания Hedra представила новую модель Omnia для генерации аватарных видео. В отличие от статичных говорящих голов, Omnia позволяет создавать короткие ролики с управлением камерой, где аватар может появляться в полный рост. Длительность таких роликов составляет 8 секунд.

Качество коротких роликов оценивается как хорошее. Однако после выхода таких моделей, как Kling 3 и Sidenesky 2, конкуренция в области генерации коротких клипов значительно возросла. Платформа Hedra предлагает работу с референсами, элементами и даже агентами для помощи в генерации.

Процесс генерации в Hedra включает этап проверки и утверждения итогового запроса. Для бесплатного аккаунта скорость обработки считается высокой. Например, был создан 5-секундный ролик хорошего качества, на котором мужчина протирает зеркало.

Кроме Omnia, у Hedra есть модель Avatar, которая генерирует видео с говорящей головой длительностью до 5 минут. На вход можно подавать звук или текст. Качество стабильное, хотя иногда могут наблюдаться артефакты вроде неровных зубов при улыбке.

Также компания представила собственный апскейлер видео, повышающий разрешение до 4K, предположительно, только для сгенерированных на платформе роликов.

Дополнительно была создана база данных голосов для озвучки, по которой можно осуществлять поиск с помощью текстовых запросов.

Ознакомиться с возможностями платформы можно на официальном сайте Hedra.

Этот пост Вконтакте:

Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.