跳到正文
arXiv Computer Vision· Shidu Ren, Yunze Liu, Xing Liu, Chi-Hao Wu, Enmin Zhou, Junxiao Shen·· 4 小时前AI 评分26

ICM-Bench:多模态智能体长时记忆中的身份级推理基准

ICM-Bench: Person-Level Identity Reasoning in Multimodal Agents with Long-Term Memory

AI 导读

研究者推出 ICM-Bench,这是首个专门评估多模态智能体长视频记忆中身份中心推理的基准,包含 839 段合成视频(共 141 分钟)和 1217 道开放式问题,围绕一位一年生活相册中的六位常驻成年人。Gemini 3.1 Pro 取得最高总体准确率 74.0%,但在需要长期身份画像的问题上降至 60.3%,表明现有系统能恢复大量事件级记忆,却难以围绕稳定人物累积证据。

来源:arXiv Computer Vision · arxiv.org