arXiv Artificial Intelligence· Yifei Zhao, Fanyu Zhao, Han Zhang, Yixuan Lin, Yuyang Hou, Bin Wu, Ruike Cao, Li Xiao, Yinsheng Li·· 2 小时前AI 评分34
3D大语言模型真的在用3D证据吗？UNICORNS基准与HORN方法给出检验
Do 3D Large Language Models Really Use 3D Evidence?
AI 导读
研究团队提出UNICORNS基准，用557个ScanNet扫描中的11,387个问题检验3D-LLM在指代歧义、证据不足和错误预设等四类证据条件下的可靠性。六个开源3D-LLM中，最强零样本模型在可回答问题对照上准确率为61.22%，但在八个挑战类别上仅40.94%。为此提出的义务感知后训练方法HORN在挑战类别上达到75.1±1.0%、整体77.2±0.8%，且未降低可回答对照准确率。
来源：arXiv Artificial Intelligence · arxiv.org