arXiv Robotics· Kangrui Wang, Qineng Wang, Changhe Chen, Pingyue Zhang, Chi Gui, Feishi Wang, Canyu Chen, Wenli Xiao, Xiaoyu Huang, Tonghe Zhang, Linjie Li, Zihan Wang, Minyeong Kim, Yiyou Sun, Mingkai Deng, Jinyu Hou, Qi Zhu, Han Liu, Eric P. Xing, Huaxiu Yao, Zhiwen Fan, Yuejiang Liu, Dawn Song, Pieter Abbeel, Li Fei-Fei, Jiajun Wu, Yuke Zhu, Guanya Shi, Ruohan Zhang, Manling Li·· 5 小时前AI 评分58
Embodied First Exam：面向编码智能体控制机器人的统一评测框架
Embodied First Exam
AI 导读
作者提出 Embodied First Exam，一个让编码智能体自行选择直接控制、写代码控制或训练策略控制的统一评测框架，包含 47 台机器人、35 个套件共 1156 个任务，其中 9 个新套件覆盖空间谜题、灵巧操作、多机器人交互、动态全身控制和 sim-to-sim 工程。
推荐理由模型分析
作者团队提出面向编码智能体控制机器人的统一评测框架，覆盖 47 台机器人、35 个套件共 1156 个任务，并给出标准、实时、特权三种设置。核心任务上最强智能体成功率仅 34%，还按失败阶段做了归因，可供做机器人智能体与评测基准的人对照任务设计和能力边界。
来源：arXiv Robotics · arxiv.org