该论文提出了ICM-Bench(身份中心记忆基准),这是首个专门评估多模态智能体在长视频记忆中维护和推理人物身份能力的基准。研究指出,现有基准虽能衡量广泛记忆问答,但未单独考察跨时间关联同一人物身份的能力。该基准包含839个合成片段,总时长141分钟,围绕六位反复出现的成年人构建一年生活相册,并配有1217个开放式问题。实验对比了直接字幕记忆、记忆增强智能体和图检索系统,结果显示Gemini 3.1 Pro整体准确率最高达74.0%,但在需要长期身份档案的问题上降至60.3%。这表明当前系统能较好恢复事件级记忆,但在围绕稳定人物身份累积证据时可靠性不足,揭示了多模态智能体在身份推理方面的关键短板。
| ICM-Bench | 身份中心记忆基准,首个专门评估多模态智能体在长视频中基于身份推理的基准。 |
| multimodal agents | 多模态智能体,能够处理和理解多种类型数据(如视频、音频、文本)的AI系统。 |
| long-term memory | 长期记忆,指智能体存储和检索跨长时间跨度信息的能力。 |
| identity-centric reasoning | 基于身份的推理,指围绕个人身份进行关联和推断的能力。 |
| graph-retrieval systems | 图检索系统,利用图结构来组织和检索信息,以支持复杂关系推理。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅