arXiv Artificial Intelligence· Hengyu Ye, Songhua Hu·· 2 小时前AI 评分31
从结果到组件:面向 LLM 所提修复的反事实评估框架
From Outcomes to Components: A Counterfactual Evaluation Framework for LLM-Proposed Repairs
AI 导读
一项反事实评估框架把 LLM 提出的修复动作拆成"改哪些记录"和"改多少"两部分,在交通网络与数据库任务中分别纠正后从同一初始状态执行对比。114 个交通动作中有 76 个同时纠正两部分的收益超过单独纠正任一部分的收益之和,其中 6 个动作单独纠正任一部分反而变差、两部分同时纠正才改善。
来源:arXiv Artificial Intelligence · arxiv.org