跳到正文
arXiv Robotics· Maria Attarian, Yifan Ruan, Claas Voelcker, Chenyang Cao, Amy Zhang, Peter Stone, Nicholas Rhinehart, Igor Gilitschenski·· 4 小时前AI 评分26

如何为 Vision-Language-Action 模型选择适配方法:后训练、微调与引导的实战指南

Post-Training, Finetuning, and Steering:A Field Guide for Curating Training Data

AI 导读

研究对比了 Vision-Language-Action 模型在不同数据场景下的适配方法,覆盖 LIBERO 仿真任务与 Franka 真机任务。离线场景中,有失败数据时基于 critic 的引导方法优于监督微调,但离线 RL 训练 critic 函数未能超过更简单的 Monte-Carlo 方法。在线场景中,critic 引导的样本效率显著高于策略梯度微调,但性能上限低于完整微调。

来源:arXiv Robotics · arxiv.org