MANIPULATION
智能体驱动的真实到仿真：基于视觉语言智能体的物理世界建模
Guanxiong Chen, Qianjun Xia, Jiawei Peng, Heng Zhang, Bole Ma, Justin Qian, Ziyi Jiao, Bingyang Zhou, Luoxin Ye, Kaifeng Zhang, Kunyi Wang, Weijia Zeng, Yunuo Chen, Pengzhi Yang, Ziqiu Zeng, Huamin Wang, Chao Liu, Alan Yuille, Fan Shi, Changxi Zheng
- 发表年份
- 2026
- 访问权限
- 开放获取
摘要
本文提出了一种名为“Agentic Real2Sim”的框架，利用视觉语言智能体将真实世界中的物体-机器人交互记录自动转换为可运行的物理仿真环境，涵盖刚体操作、可变形物体交互和人形运动等多种场景。该框架通过开源视觉语言模型驱动智能体决策，显著降低了传统Real2Sim流程中的人工干预和成本。
关键词
Real2Simphysics-based world modelingvision-language agentsrobotic interactionsimulation
相关论文
MANIPULATION
📊 7,533 引用
Real-Time Obstacle Avoidance for Manipulators and Mobile Robots
Oussama Khatib
1986
MANIPULATION
📊 6,720 引用
A Mathematical Introduction to Robotic Manipulation
Richard M. Murray, Zexiang Li, Shankar Sastry
2017
MANIPULATION
📊 3,821 引用
Robot dynamics and control
Mark W. Spong
1989
MANIPULATION
📊 3,499 引用
A tutorial on visual servo control
Seth Hutchinson, Gregory D. Hager, Peter Corke
1996