EgoEV-HandPose: 스테레오 이벤트 카메라를 이용한 1인칭 3D 손 자세 추정 및 제스처 인식
EgoEV-HandPose: Egocentric 3D Hand Pose Estimation and Gesture Recognition with Stereo Event Cameras
TL;DR AI
1분핵심 요약
연구진은 스테레오 이벤트 카메라를 이용한 손잡이 양손 3D 손 포즈 추정과 제스처 인식을 위한 엔드투엔드 프레임워크 EgoEV-HandPose를 제안했다.
논문은 5,419개의 주석 시퀀스와 38개 제스처를 포함한 대규모 실제 데이터셋 EgoEVHands도 함께 공개했다.
KeypointBEV 기반 융합 설계를 통해 모션 블러, 저조도, 자기 움직임, 가림 상황에서도 기존 프레임 카메라 및 이벤트 기반 방법보다 더 안정적으로 동작한다.
이 방법은 포즈 추정과 제스처 인식 모두에서 최신 수준의 성능을 기록해 AR·VR 같은 응용에 유망하다.