Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Нейрорендеринг оживляет черновую анимацию: возможности и нюансы технологии.

Автор продолжает наблюдать за разработкой системы, которая анализирует playblast (черновую анимацию из вьюпорта) и добавляет к ней мех, текстуры, освещение, а также выполняет рендеринг, сохраняя исходное движение. Это пример нейрорендеринга.

Технология хорошо справляется с движением камеры и общей анимацией. Ранее обсуждалось, что она может сглаживать мелкие детали в анимации лица, добавляя некоторую зловещесть. В новом примере таких мелких деталей нет, однако опытные аниматоры заметили возможное легкое проскальзывание лап по поверхности, что может влиять на динамику.

При этом нейрорендеринг автоматически генерирует убедительные спецэффекты, например, вылетающий из-под лап песок, что сложно настраивать вручную.

Также интересно наблюдать, как меняется восприятие одной и той же анимации на сером фоне и в лесном окружении.

Система не является ComfyUI. По словам автора, это

custom nodes integrating python, runway, sora with other nodes for fidelity

, то есть самописное решение на Python с интеграцией внешних моделей.

Это пример того, как технический специалист может создать мощный инструмент для постобработки анимации.

Этот пост Вконтакте:

Ещё новости:

Субтитры без ручной расшифровки: SmartSub и WhisperSubTranslate.
Стильный промпт для переноса артов в швейцарском стиле со строгой сеткой и броскими цветами!
Jev: новый класс ИИ для быстрых решений и лучшие проекты на GitHub!
Китайский айтишник создал топовую локальную нейронку laya-mlx и заставил её играть в «Змейку».
Теренс Тао: темпы развития ИИ стали слишком быстрыми!
Лучшая 4D-визуализация движений: Gemini, Codex и three.js растянули время.
Китайская ботоферма с ИИ-роботом и физическим «пальцем» обходит проверки соцсетей.
ChatGPT и Claude ошибаются в финансовых вопросах в 57% случаев.
ChatGPT якобы сам отправил письмо в ФБР через Gmail пользователя.
«Ты же говорил, что так можно»: как ИИ выручает бухгалтеров на 1С и их руководителей.