HumanEgo: 从几分钟人类自我中心视频实现零样本机器人学习

Zhi, Wang, Botao He, Kelin Yu, Seungjae Lee, Ruohan Gao, Furong Huang, Yiannis Aloimonos

2026

摘要

提出HumanEgo框架，通过将人类演示提升为手-物交互的实体级表示，并训练带有密集辅助目标的流匹配策略，弥合了人机之间的具身差距。仅需30分钟人类视频即可在四项真实任务上达到92.5%的平均成功率，无需机器人数据且零样本迁移到新机器人、相机和环境。

zero-shot learningegocentric videohuman-to-robot transferflow matching policyembodiment gap

MANIPULATION

📊 2 引用

Yusen Li, Ziwei Wang, Xiangye Zhu 等 12 位作者

Robotics and Computer-Integrated Manufacturing · 2026

MANIPULATION

📊 1 引用

Shaoqing Qin, Lida Zhu, Yanpeng Hao 等 10 位作者

Robotics and Computer-Integrated Manufacturing · 2026

MANIPULATION

📊 0 引用

Bo Li, Yuanbo Zhao, Huijie Xiao 等 6 位作者

Robotics and Computer-Integrated Manufacturing · 2026

MANIPULATION

📊 0 引用

Hao Li, Yuhui Yu, Rui Fu 等 6 位作者

Robotics and Computer-Integrated Manufacturing · 2026