arXiv Robotics· Xu Hu, Changjie Wu, Linzhe Shi, Hang Zhang, Chen Yang, Lingjun Zhang, Guowen Zhang, Mu Xu, Junran Peng, Qing Li, Zhaoxiang Zhang·· 3 小时前AI 评分38
Trace-WAM:用未来 3D 运动预测辅助世界动作模型学习操作
Trace-WAM: Learning to Act via 3D Motion Prediction for World Action Models
AI 导读
Trace-WAM 在视频-动作学习中加入未来 3D 运动预测作为辅助目标,监督时序点对应、图像平面位移与深度变化,直接刻画操作中的交互动态。模型采用三分支 Mixture-of-Transformer(Tri-MoT)架构联合学习视频预测、运动预测与动作生成,动作专家不消费预测轨迹,推理仍保持单次视觉前向加动作去噪。
来源:arXiv Robotics · arxiv.org