Китайский Agibot представил Genie Sim 3.0 — комплексную симуляционную платформу для обучения и оценки роботов.
Шанхайский разработчик гуманоидных роботов Agibot представил среду разработки Genie Sim 3.0, призванную устранить ряд узких мест воплощенного ИИ: генерацию окружения, масштабируемость данных и стандартизированную оценку. Речь идет об объединении генерации сцен, симуляций, данных и оценок в единую многоразовую инфраструктуру.
Пространственная мировая модель позволяет создавать полностью интерактивные 3D-сцены из простых текстовых или графических входных данных. Система не требует ручного моделирования и настройки оборудования: разнообразные среды создаются с минимальными входными данными. Нейросеть обеспечивает генерацию сцен за минуты, тогда как у традиционных конвейеров подобные процессы занимают часы.
Синхронизированный вывод RGB, глубины, показаний лидара и других мультимодальных данных обеспечивает «восприятию» робота высокую достоверность.
Agibot разработал пять наборов задач, соответствующих ключевым способностям алгоритмов роботов:
- пониманию инструкций;
- пространственным рассуждениям;
- выполнению базовых навыков;
- адаптации к помехам;
- переносу от обучения к развертыванию.
Тест Genie Sim Benchmark поддерживает популярные модели GO-2, серию Pi и серию GR00T.
GenieSim-Instruction оценивает соответствие между командами на естественном языке и поведением робота.
GenieSim-Spatial отвечает за рассуждение о геометрических и семантических пространственных отношениях.
GenieSim-Manip проверяет выполнение базовых навыков и составных долгосрочных задач.
GenieSim-Robust тестирует адаптивность в условиях реальных помех: при изменении освещения, шуме датчиков и вариациях окружения.
Sim2Real включает задачи для переноса на реального робота без предварительного обучения с высоким процентом успеха.
Genie Sim 3.0 представил интеграцию с фреймворком RLinf, обеспечивающую полный конвейер обучения с подкреплением (RL) для воплощенного ИИ. Подход дополняют VLA-модели (vision-language-action), использующие недорогое RL-дообучение для преодоления разрыва между «обобщенным пониманием» и «точными микроманипуляциями».
Genie Sim 3.0 охватывает полный стек разработки: среда, данные, обучение, оценка.
Ещё новости:
