MineExplorer: Minecraft에서 MLLM 에이전트의 오픈월드 탐험 평가
MineExplorer: Evaluating Open-World Exploration of MLLM Agents in Minecraft
TL;DR AI
1분핵심 요약
연구진은 멀티모달 언어모델 에이전트의 오픈월드 탐색 능력을 평가하기 위한 마인크래프트 벤치마크 MineExplorer를 공개했다.
마인크래프트에 지나치게 특화된 단일 작업은 걸러내고, 이를 다단계의 암묵적 과제로 합성했으며, 멀티에이전트 합성으로 작업 그래프·장면·평가기를 구축했다.
강한 MLLM 에이전트도 일부 단일 단계 과제에서는 잘하지만, 숨겨진 선행 조건과 더 긴 경로가 늘어날수록 성능이 크게 떨어졌다.
이번 벤치마크는 장기 탐색과 의존성 관리 능력의 한계를 드러내며, 실제 환경에서의 embodied AI 평가에 중요한 시사점을 준다.