arXiv Robotics· Zhi Cao, Howard Ji, Kevin Zhang, Kuangzhi Ge, Li Fei-Fei, Jiajun Wu, Huang Huang·· 4 小时前AI 评分33
TrAct：用视觉轨迹打通机器人控制与视觉预测
TrAct: Bridging Robot Control and Visual Prediction with Visual Tracks
AI 导读
TrAct 是一个以视觉轨迹为中间接口的世界模型机器人决策框架，由 VLAT、TWM 和 VLAC 三部分组成：VLAT 从当前观测和语言指令联合预测候选动作与视觉轨迹，TWM 基于轨迹预测未来视觉结果，VLAC 对结果打分并选出最符合指令的轨迹，执行其配对动作。
来源：arXiv Robotics · arxiv.org