跳到正文
arXiv Computer Vision· Meng Cao, Can Zhao, Jinjie Wei, Haonan Zhao, Yulong Zhang, Duo Han, Xiaofan Li, Ziwu Song, Rongtao Xu, Ruyi Gan, Hao Wang, Qian Wang, Daolin Ma, Ian Reid, Xiaodan Liang·· 3 小时前AI 评分30

EgoJEPA:无需重定向,从第一视角视频学习跨本体灵巧操作

EgoJEPA: Beyond Retargeting for Dexterous Manipulation from Egocentric Videos

AI 导读

EgoJEPA 提出一个三阶段框架,无需基于规则的人到机器人重定向,即可从第一视角人类视频中学习本体无关的表征,用于灵巧操作。该方法先以 JEPA 式视觉预测预训练人类动作,再进行潜在动作世界建模,最后通过轻量动作适配器适配不同机器人。

来源:arXiv Computer Vision · arxiv.org