arXiv Computer Vision· Yue Su, Bokai Lin, Xinkai Wang, Chubin Zhang, Xiangnan Wu, Kuan Zhang, Weiyang Jin, Jiwen Yu, Yiming Li, Cewu Lu, Lixin Yang, Xihui Liu·· 2 小时前AI 评分24
OneWM:统一因果训练下世界建模与动作建模能否互惠?
Can World and Action Modeling Benefit Each Other under Unified Causal Training?
AI 导读
研究团队提出 OneWM 统一因果训练框架,将动作同时作为世界预测的条件和策略学习的目标,在共享的视频-动作架构中训练。在 LIBERO、LIBERO-Plus、RoboCasa365 及真实世界策略实验中,学习指定动作的视觉后果提升了策略性能与跨场景泛化能力,动作学习也提升了多视角世界预测的保真度,表明两者在统一因果训练下可相互促进。
来源:arXiv Computer Vision · arxiv.org