World2Minecraft: 점유 기반 시뮬레이션 장면 구축

연구진은 의미론적 점유 예측을 활용해 실제 실내 장면을 편집 가능한 마인크래프트 월드로 재구성하는 World2Minecraft를 소개했다.

또한 156개 실내 장면에서 수집한 100,165장 이미지로 구성된 MinecraftOcc 데이터셋을 공개해 점유 예측 모델의 성능 평가와 개선을 돕는다.

이 접근법은 내비게이션과 Vision-Language Navigation을 포함한 embodied AI 연구를 위한 유연한 시뮬레이션 플랫폼을 제공한다.

실제 환경을 구조화된 마인크래프트 장면으로 바꾸어 3D 장면 이해와 로봇 학습용 데이터 확장에 기여할 수 있다.