跳到正文
arXiv Artificial Intelligence· Manan Tayal, Mumuksh Tayal, Ravi Prakash·· 13 小时前AI 评分34

EpiFlow:用上图引导流匹配在离线强化学习中兼顾安全与性能

EpiFlow: Bridging Safety and Performance in Offline Reinforcement Learning via Epigraph-Guided Flow Matching

AI 导读

EpiFlow 将安全离线强化学习建模为带硬状态约束的最优控制问题,通过离线学习上图可行性价值函数并用流匹配提取策略,近似求解 HJB 方程。在 boat navigation、Safety-Gymnasium 和 Bullet-Safety-Gym 等安全关键基准上,该方法取得有竞争力的回报,同时约束违反接近零。论文已被 NeurIPS 2026 接收。

推荐理由模型分析

该工作把安全离线强化学习表述为带硬状态约束的最优控制问题,用离线数据学习epigraph可行性值函数、再用流匹配提取策略,针对的是软约束方法可能允许违规、且对分布偏移敏感这一瓶颈。在船导航、Safety-Gymnasium和Bullet-Safety-Gym基准上报告了有竞争力的回报与接近零的约束违反,但证据限于仿真基准,真实部署的安全保证仍需另行验证。做安全关键自主系统的研究者可据此比较硬约束与软约束路线的取舍。

来源:arXiv Artificial Intelligence · arxiv.org