跳到正文
arXiv Artificial Intelligence· Prajvi Saxena, Sabine Janzen, Wolfgang Maass·· 3 小时前AI 评分34

研究揭示 LLM 显式与应用的 Theory of Mind 差距

Diagnosing the Explicit-to-Applied Theory of Mind Gap in LLMs

AI 导读

研究基于四个结构多样的基准,区分 LLM 的显式 ToM(识别他人信念)与应用 ToM(用信念预测行为),发现聚合分数掩盖能力不均:SimpleToM 上 Llama-3.1-8B 总体 51.5%,心理状态识别达 99.4%,行为预测仅 28.9%。

来源:arXiv Artificial Intelligence · arxiv.org