Видео в реальном времени: Blender, Astra и Minimax H3 Max генерируют быстрее, чем играют.
Мы наблюдаем, как выход Astra подтолкнул сообщество к экспериментам, о которых раньше мало задумывались. Волна интереса к Minimax продолжается: на базе этой модели появляется множество новых решений, и на неё уже делают ставку производители, включая NVIDIA.
На видео показана работа Astra в Blender: модель постепенно моделирует кораблик, а прямо в окне редактора идёт постоянный реалтайм-рендер сразу видео и анимаций в разных стилях.
Рендер выполняется на стороне FAL через вызовы H3 Max в реальном времени. Для Minimax уже появилось множество решений по «генерации быстрее воспроизведения». Среди самых известных: FAL H3 Max, VDN и SOL от NVIDIA. Все они генерируют видео быстрее реального времени.
Закономерный вопрос: на чём это работает? Ответ: на сервере с 8×B200. Пока такое решение не подходит для локального использования.
В сети уже есть масса проектов по «video on demand»: пользователь решает, куда пойдёт бесконечная генерация. Сервер успевает сгенерировать по три-четыре варианта в буфер и подставляет нужный фрагмент в зависимости от реакции чата или пользователя. Это похоже на управляемый Netflix, который поворачивает сюжет под запросы зрителя.
Пока технология дорогая в абсолютных цифрах: API-вызовы стоят денег. Но в расчёте на производство стриминг-контента затраты выглядят незначительными.
Наступает интересный момент: нужно не только «сделать красиво», но и «продолжать делать красиво», пока пользователь нажимает на кнопку.
Проект на GitHub: https://github.com/gokayfem/H3-Max-Blender
Ещё новости:
