跳到正文
arXiv Artificial Intelligence· Dongyu Gong·· 2 小时前AI 评分29

LLM 在工作记忆中共享读出瓶颈

Language Models Share a Readout Bottleneck in Working Memory

AI 导读

研究在 3 个家族、70M 至 14B 参数的 15 个预训练 LLM 及从零训练的最小 Transformer 上,用 N-back 任务区分了精度与干扰两种解释。

来源:arXiv Artificial Intelligence · arxiv.org