arXiv Artificial Intelligence· Shawn Im, James Oldfield, Adel Bibi, Sharon Li·· 4 小时前AI 评分31
通过行为反事实解读模型推理过程
Interpreting Model Reasoning through Behavioral Counterfactuals
AI 导读
研究者提出行为反事实方法,通过训练模块编辑残差流,使固定回答在源提示词与反事实目标提示词下的输出分布 KL 散度最小,从而定位干预对模型推理的影响。该方法比标准激活重建目标更有效地恢复反事实行为,其归因结果可识别对反事实恢复因果重要的位置。
来源:arXiv Artificial Intelligence · arxiv.org