Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Freefield: картинки, видео, VFX и музыка в одном интерфейсе на ComfyUI и открытых моделях.

Freefield объединяет генерацию изображений, видео, VFX и музыки в одном интерфейсе. Под капотом работает ComfyUI, используются модели с открытыми весами. Запуск возможен на собственной GPU или в Modal. В каталоге собрано около 120 приложений и шаблонов, многие из них используют общие пайплайны.

Схема работы простая: пользователь выбирает инструмент, загружает референс, задаёт параметры, и студия запускает готовый workflow.

Что умеет

  • FLUX 3 Klein, Z-Image, Qwen Image Edit: генерация и редактирование изображений, relight, работа с персонажами и товарами.
  • LTX-2.5, Wan, MiniMax H3: видеогенерация, управление камерой, lipsync, замена персонажей. В Effects доступны 24 LoRA-эффекта.
  • MiniMax Music 3 и Stable Audio 3: музыка и звуковые эффекты.
  • Use in…: передаёт результат в следующий инструмент. История хранит seed и настройки, а workflow можно скачать и открыть нодами в ComfyUI.

Требования

Для локального backend нужно окружение ComfyUI/PyTorch под свою GPU. Интерфейс работает в браузере.

  • Create Image: 1–2K
  • LTX Image to Video: 2–10 секунд, 24 fps
  • Effects: 480×832 или 832×480, 16 fps, 3 или 5 секунд

Для части задач ориентиром служит RTX 3090 Ti 24 ГБ. Пики VRAM в опубликованных примерах на L40S 48 ГБ:

  • Create Image: 15,4 ГБ
  • Cinema Studio Video: 44,3 ГБ

Эти замеры зависят от настроек и выгрузки моделей из памяти; весь каталог на 24 ГБ пока не проверен. Минимальный объём RAM не указан.

Пример скорости: morph занимает 161 секунду от запуска до готового видео на backend с H100.

Загрузка весов идёт по пакетам: пакет FLUX 3 потребует 17,8 ГБ, пакет LTX-2 потребует 66 ГБ. Скачивать весь каталог не нужно.

Подробнее: GitHub и Карта VRAM.


Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.