跳到正文
arXiv Robotics· Chubin Zhang, Changyuan Wang, Yirui Wang, Ao Li, Shilin Ma, Yue Su, Cai Zhou, Xiuwei Xu, Tianle Zhang, Yansong Tang·· 3 小时前AI 评分38

EgoForesight:用带噪第一视角动作有效扩展策略学习

EgoForesight: Effectively Scaling Policy Learning with Noisy Egocentric Actions

AI 导读

EgoForesight 是一个视觉-语言-动作框架,通过降低不可靠动作标签的影响、并利用演示结果作为补充监督,联合学习机器人演示与第一视角视频两类数据。在 30,000 小时预训练数据下,其扩展斜率比基线更陡,真实世界开环动作 MSE 降低 20.5%,RoboCasa 少样本成功率提升 8.1 个百分点。后训练后在仿真与真实世界灵巧操作中均取得较强绝对性能。

来源:arXiv Robotics · arxiv.org