DrawMotion: 자유로운 손그림으로 3D 인간 모션 생성

연구진은 텍스트와 자유형 스틱맨 스케치를 함께 받아 3D 인간 동작을 생성하는 확산 기반 프레임워크 DrawMotion을 제안했다.

이 시스템은 텍스트와 스케치 정보를 융합하는 Multi-Condition Module을 사용하며, 학습 없이도 guidance를 적용할 수 있다.

DrawMotion은 여러 데이터셋에서 자동으로 스틱맨 스케치를 생성할 수 있고, 실험에서도 동작 충실도를 잘 유지했다.

사용자 연구에서는 작업 시간이 약 46.7% 줄어들어, 텍스트만 쓰는 방식보다 더 빠르고 표현력 있는 동작 지정이 가능했다.