arXiv Artificial Intelligence· Pei-lin Li, Qingle Liu, Junyang Feng, Siyu Li, Sunqi Fan, Xin-Sheng Chen, Shuojin Yang·· 19 小时前AI 评分32
当上下文误导:大语言模型中的管辖范围上下文学习
When Context Misleads: In-context Learning with Jurisdiction in Large Language Models
AI 导读
研究提出 FakeContextBench 基准,覆盖七个领域的伪科学主张,用于评测大语言模型的上下文权威判别能力。评测显示,仅靠大规模预训练不足以可靠区分上下文权威,主流 ICL 微调方法反而使模型更易受误导上下文影响,现实准确率较基座模型最多下降 14.95 个百分点。
来源:arXiv Artificial Intelligence · arxiv.org