Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

OmniHuman 2.0: видео до 5 минут одним дублем и цена $0,07 за секунду!

Вышла модель OmniHuman 2.0 от BytePlus. Она умеет создавать липсинк: берёт изображение персонажа и готовую аудиозапись, затем синхронизирует движения губ с речью или пением.

Модель также анимирует мимику и жесты с учётом интонации и содержания звука.

Что изменилось

  • До 5 минут непрерывного видео за одну генерацию. Раньше предел составлял 60 секунд.
  • Для такого длинного дубля больше не требуется склеивать несколько генераций.
  • Заявлены улучшение качества и снижение цены с $0,12 до $0,07 за секунду. Это примерно на 42% дешевле.

При этом заявленные 5 минут ещё не показывают, насколько стабильно модель удерживает мимику и характер движения на всей дистанции.

Стоимость

По цене из официального анонса BytePlus:

  • 5 секунд: $0,35.
  • 10 секунд: $0,70.
  • 15 секунд: $1,05.
  • 30 секунд: $2,10.

Пятиминутный ролик по этой ставке обойдётся в $21 за одну генерацию. Повторные попытки увеличат бюджет.

Официальная страница OmniHuman

Попробовать OmniHuman: BytePlus Console.

Потребуется войти или зарегистрироваться.

Этот пост Вконтакте:

Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.