跳到正文
arXiv Computer Vision· Chunxi Luo, Qishuai Ding, Xingchen Peng, Hengwei Ye, Ke Zhang, Wenxin Lian, Tianyi Lu, Chunlong Yu, Zhenya Lin·· 4 小时前AI 评分22

Frame Evidence:多图空间推理中参考系与视觉证据的基准测试

Frame Evidence:A Benchmark for Reference Frames and Visual Evidence in Multi-Image Spatial Reasoning

AI 导读

研究者提出 Frame Evidence 基准,包含 320 组匹配三元组和 960 道中文多选题,用于检验多图空间推理中参考系变化与视觉证据变化下的答案一致性。在 288 道留出题上测试 20 种配置,GPT 三样本提示达到 50.00% 单题准确率,但最佳三帧组准确率仅为 5/48(10.42%),由 GPT 两样本提示取得。少样本提示和任务适配能提升单题准确率,却未持续改善联合正确性。

来源:arXiv Computer Vision · arxiv.org