跳到正文
arXiv Artificial Intelligence· Kawai Chung, Chunkit Chan, Yuxuan Liu, Yauwai Yim, Xi Yang, Wenbin Hu, Huihao Jing, Chiu Yeung Tang, Changxuan Fan, Ki Sen Hung, Tsun On Kwok, Haoran Li·· 18 小时前AI 评分22

Jev-ToM:在类型化决策模型中评估心智理论

Jev-ToM: Evaluating Theory of Mind in Typed Decision Models

AI 导读

Jev-ToM 在来自 9 个 ToM 基准的 11,117 道英文文本问题上,对比了 5 个类型化决策模型与 7 个生成式基线。TypeSafe Jev 取得 73.2% 的 source-balanced 准确率,在全部六类能力上排名第一或第二,领先于信念、目标/欲望/意图和情绪任务。资源对比显示 Jev 有望降低重复 ToM 选择的成本与等待时间,但基于置信度的选择仍依赖具体基准。

来源:arXiv Artificial Intelligence · arxiv.org