跳到正文
arXiv Artificial Intelligence· Matteo Da Pelo, Alessio Donvito, Claudio Frongia, Pietro Salis, Antonio Lieto·· 13 小时前AI 评分26

LAPITHS:为 AI 表现提供理论化解读的框架,质疑 CENTAUR 类模型的人类相似性主张

Taming the Centaur(s) with LAPITHS: a framework for a theoretically grounded interpretation of AI performances

AI 导读

LAPITHS 框架通过两项定量评估来检验 AI 系统的人类相似性主张:一是 Minimal Cognitive Grid,用于估计人工系统的认知合理性;二是行为对比,显示不具备认知合理性结构约束的其他系统也能复现 CENTAUR 类模型的结果。

推荐理由模型分析

LAPITHS 用最小认知网格和行为对比两项量化评估,检验 CENTAUR 等模型关于类人认知的主张是否成立,并指出相似表现可由不满足结构约束的系统复现。对关注大模型能力评测与认知解释的研究者,它提供了区分行为表现与底层机制的分析框架;结论限于论文所检验的模型与论证,不宜外推为对所有语言模型认知能力的否定。

来源:arXiv Artificial Intelligence · arxiv.org