RoboWits: 로봇의 창의적 문제 해결에서 예상치 못한 과제들

연구진은 로봇의 추론 능력과 창의적 문제 해결을 예상치 못한 상황에서 평가하는 새로운 벤치마크 RoboWits를 공개했다.

자동화 파이프라인으로 기하, 재료, 조립 과제를 아우르는 30개의 시드 태스크와 208개의 변형 태스크를 생성했다.

사전학습된 비전-언어-행동 모델은 미세조정 후 시드 태스크에서는 성능이 향상됐지만, 변형 태스크에서는 크게 취약했다.

이번 결과는 로봇 정책이 새로운 조건에서 적응하고 추론하며 창의적으로 도구를 활용하는 능력이 아직 부족함을 보여준다.