AI 에이전트 연구
ICM-Bench: Person-Level Identity Reasoning in Multimodal Agents with Long-Term Memory
ARarXiv
멀티모달 에이전트가 단순히 사건을 기억하는 것을 넘어, 시간의 흐름 속에서 반복되는 인물의 신원과 관계를 추적하도록 돕는 새로운 평가 기준, ICM-Bench가 개발되었습니다.
세 줄 요약
- 최고 성능의 AI 모델조차도 장기간에 걸쳐 특정 개인과 관련된 복잡한 정체성 프로필을 추론할 때는 정확도가 크게 떨어지는 한계가 확인되었습니다.
- 이는 인공지능이 일회성 사건 기억을 넘어, 시간의 흐름 속에서 지속적인 인물 관계와 안정된 신원을 유지하는 능력이 필수적임을 보여줍니다.
- ICM-Bench는 장시간 비디오 메모리 내에서 반복 등장하는 인물들을 중심으로 '신원 중심 추론(Identity-Centric Reasoning)' 능력을 측정하는 최초의 벤치마크입니다.
멀티모달 에이전트가 단순히 사건을 기억하는 것을 넘어, 시간의 흐름 속에서 반복되는 인물의 신원과 관계를 추적하도록 돕는 새로운 평가 기준, ICM-Bench가 개발되었습니다.