AsyncTool: 다중 작업 시나리오에서 비동기 함수 호출 능력 평가

연구진은 LLM 에이전트의 비동기 도구 호출 성능을 평가하는 벤치마크 AsyncTool을 제안했다.

이 벤치마크는 현실적인 도구 응답 지연을 반영해 단계, 서브태스크, 태스크 수준의 동시 이질적 작업을 시뮬레이션한다.

실험 결과, 도구 응답 지연은 멀티태스크 환경에서 성능을 크게 떨어뜨리는 것으로 나타났다.

이번 연구는 LLM 에이전트에 더 나은 조정, 의존성 추적, 시간적 추론이 필요함을 보여준다.