DecMem: 분리된 메모리로 분 단위의 일관된 세계 생성에 다가가기

연구진은 장기 일관성 비디오 생성을 위한 분리형 메모리 구조 DecMem을 제안했다.

이 방식은 Sparse Global Memory와 Anchored Local Memory로 계산 비효율과 attention dispersion 문제를 해결한다.

Sparse Global Memory는 긴 맥락을 효율적으로 불러오고, Anchored Local Memory는 안정적인 국소 외삽을 돕는다.

실험에서 DecMem은 기존 방법보다 더 일관되고 고품질의 장시간 비디오 생성 성능을 보였다.