Keep It InMind: 에이전트 기억에서의 암묵적 연합 블라인드 스팟 벤치마킹

연구진은 많은 AI 에이전트 메모리 시스템이 노트처럼 동작해, 질문이 직접적으로 관련 있어 보일 때만 사실을 꺼내온다고 지적했다.

이 때문에 마카롱 알레르기 경고나 고양이와 백합의 안전성처럼 안전과 맥락이 중요한 연결을 놓칠 수 있다.

여러 최신 시스템은 직접적인 기억 질문에는 답하지만, 간접적인 상식 연결을 통해 같은 사실을 활용하는 데는 실패했다.

이를 측정하기 위해 연구진은 암묵적 연관성 실패를 평가하는 벤치마크 InMind Memory Bench를 제안했다.