HorizonStream: 스트리밍 3D 재구성을 위한 장기 범위 어텐션
HorizonStream: Long-Horizon Attention for Streaming 3D Reconstruction
TL;DR AI
1분핵심 요약
연구진은 스트리밍 3D 재구성을 위한 Transformer 구조 HorizonStream을 제안했다. 이 모델은 장거리와 단거리 기하 정보를 분리해 처리한다.
Metric Readout Tokens를 사용해 카메라 자세와 스케일을 복원하며, 온라인 재구성의 안정성을 높였다.
짧은 학습 클립으로 훈련해도 1만 프레임이 넘는 긴 시퀀스까지 일반화하며, 메모리는 제한적으로 유지된다.
이 방법은 장기 재구성에서의 드리프트와 불안정성을 줄여 로보틱스, 매핑, AR/VR에 유용하다.