Harness-1: 상태 외재화 하네스를 활용한 검색 에이전트용 강화학습

연구진은 문서, 증거, 검증, 컨텍스트 관리를 모델 밖에서 처리하는 상태 외부화 하니스(state-externalizing harness)를 사용하는 200억 파라미터 오픈 검색 에이전트 Harness-1을 공개했다.

Harness-1은 8개 검색 벤치마크에서 높은 평균 curated recall을 기록했고, 기존의 가장 좋은 오픈 검색 서브에이전트를 앞섰으며 특히 전이 벤치마크에서 큰 향상을 보였다.

소거 실험에서는 하니스를 제거하자 recall이 떨어지고 행동 양식도 달라져, 구조화된 상태 관리의 중요성이 확인됐다.

이번 결과는 메모리와 기록 관리를 외부에서 맡기면 모델 부담을 줄이면서 새로운 검색 과제에 대한 전이 성능을 높일 수 있음을 시사한다.