Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Нейрорендеринг оживляет черновую анимацию: возможности и нюансы технологии.

Автор продолжает наблюдать за разработкой системы, которая анализирует playblast (черновую анимацию из вьюпорта) и добавляет к ней мех, текстуры, освещение, а также выполняет рендеринг, сохраняя исходное движение. Это пример нейрорендеринга.

Технология хорошо справляется с движением камеры и общей анимацией. Ранее обсуждалось, что она может сглаживать мелкие детали в анимации лица, добавляя некоторую зловещесть. В новом примере таких мелких деталей нет, однако опытные аниматоры заметили возможное легкое проскальзывание лап по поверхности, что может влиять на динамику.

При этом нейрорендеринг автоматически генерирует убедительные спецэффекты, например, вылетающий из-под лап песок, что сложно настраивать вручную.

Также интересно наблюдать, как меняется восприятие одной и той же анимации на сером фоне и в лесном окружении.

Система не является ComfyUI. По словам автора, это

custom nodes integrating python, runway, sora with other nodes for fidelity

, то есть самописное решение на Python с интеграцией внешних моделей.

Это пример того, как технический специалист может создать мощный инструмент для постобработки анимации.

Этот пост Вконтакте:

Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.