arXiv Artificial Intelligence· Ruxi Gu, Zhenliang Zhang, Zilei Wang, Wei Wang·· 19 小时前AI 评分27
ForgetBench：评测大语言模型长期参数记忆的遗忘动态
ForgetBench: Benchmarking Forgetting Dynamics of Long-Term Parametric Memory in Language Models
AI 导读
研究者提出 ForgetBench，用于衡量 LLM 在持续知识编辑下长期参数记忆的遗忘动态，包含概念型 QA 与场景型 QA 两种评测范式，并基于顺序编辑框架构建按时间排序的知识流。该框架以后续编辑次数索引记忆年龄，量化时间衰减、保留强度与跨实例稳定性。多模型与多编辑方法实验显示，模型呈现不同的遗忘轨迹，长期保留与泛化质量之间存在反复出现的张力。
来源：arXiv Artificial Intelligence · arxiv.org