🔥 今日值得一读 首个身份推理记忆基准!839段视频实测,最强AI准确率74%却栽在长期人物关系上
ICM-Bench: Person-Level Identity Reasoning in Multimodal Agents with Long-Term Memory
arXiv CV (cs.CV) 🔥 重点 #评测基准#多模态#Agent 🕐 09-07 12:00
👨‍💼 主理人解读 · 为什么值得关注
开发者可用此基准评估智能体跨时间关联人脸、声音和事件的能力,优化长期记忆系统设计。

📖 AI 总结

该论文提出了ICM-Bench(身份中心记忆基准),这是首个专门评估多模态智能体在长视频记忆中维护和推理人物身份能力的基准。研究指出,现有基准虽能衡量广泛记忆问答,但未单独考察跨时间关联同一人物身份的能力。该基准包含839个合成片段,总时长141分钟,围绕六位反复出现的成年人构建一年生活相册,并配有1217个开放式问题。实验对比了直接字幕记忆、记忆增强智能体和图检索系统,结果显示Gemini 3.1 Pro整体准确率最高达74.0%,但在需要长期身份档案的问题上降至60.3%。这表明当前系统能较好恢复事件级记忆,但在围绕稳定人物身份累积证据时可靠性不足,揭示了多模态智能体在身份推理方面的关键短板。

🔑 关键词速览

ICM-Bench身份中心记忆基准,首个专门评估多模态智能体在长视频中基于身份推理的基准。
multimodal agents多模态智能体,能够处理和理解多种类型数据(如视频、音频、文本)的AI系统。
long-term memory长期记忆,指智能体存储和检索跨长时间跨度信息的能力。
identity-centric reasoning基于身份的推理,指围绕个人身份进行关联和推断的能力。
graph-retrieval systems图检索系统,利用图结构来组织和检索信息,以支持复杂关系推理。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅