arXiv Artificial Intelligence· Michal Orzechowski, Rund Tawfiq, Tomasz Kosciolek·· 17 小时前AI 评分34
人工整理、LLM 生成与数据推导的本体，谁更适合当知识图谱上 LLM 智能体的检查器？
What Does an Ontology Catch? Curated, LLM-Generated and Data-Derived Ontologies as Checkers of LLM Agents over Knowledge Graphs
AI 导读
研究把本体检查器本身当作研究对象，比较人工整理、LLM 生成和数据推导三类本体在公开图谱与近 10^9 三元组私有图谱上对 LLM 智能体的检查效果。在 UniProt 上，人工整理本体标出的正确答案多于数据推导本体和 LLM 基于掩码标识符摘要生成的本体，但在真实智能体答案上，其标记精度仅略高于随机标记。
来源：arXiv Artificial Intelligence · arxiv.org