EMNLP论文：指令微调模型无法采样分布

2026年10月15日，arXiv人工智能板块发布Chaemin Jang等作者的论文，研究指令微调语言模型的采样行为。论文称，指令微调模型无法从其能够描述的分布中采样，而是坍缩为单一输出：同一persona在同一问题上，公开民调基准中超过半数题目返回相同答案，模型内部概率也集中于单一选项。论文作者在摘要中写道：“We show this draw does not exist: instruction-tuned models do not sample from distributions, they collapse to a single output.”该研究提出指令微调模型存在KNOWS/DOES分裂。截至本综述更新，尚无后续跟进报道，论文结论仍为单一来源主张。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。