Gen2Dex：从仿真视频学习灵巧操作

2026年10月20日，arXiv Robotics 刊出 Xiaowen Qiu 等作者的论文，提出 Gen2Dex 端到端框架，用于把仿真场景生成的视频演示转换为可物理执行的灵巧机器人操作轨迹。据该报道，方法先利用已知场景信息做基于模型的目标跟踪与深度手物对齐，再用残差强化学习配合反向课程和物理有效重置状态缓存修正视频参考。报道称，在干净的 ARCTIC 演示上，其性能与已有灵巧重定向方法相当，对生成视频提取的参考更鲁棒，并在仿真中完成多种刚体与铰接物体操作任务，优化轨迹已开环迁移到真实灵巧机器人。目前进展限于论文发布与上述仿真及开环迁移结果，尚无后续跟进报道。

AI 根据报道生成 · 52 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。