CogOmniControl: 창의적 의도 인지를 통한 추론 기반 제어 가능한 비디오 생성

연구진은 제어 가능한 비디오 생성을 위한 추론 기반 프레임워크 CogOmniControl을 공개했다.

이 시스템은 특화된 VLM으로 의도를 이해하고, 별도의 제어형 비디오 모델로 영상을 생성하도록 분리했다.

또한 창작 의도 이해를 더 잘 평가하기 위한 새로운 벤치마크와 평가 방법도 제시했다.

두 데이터셋에서 기존 오픈소스 모델보다 더 나은 성능을 보여, 희소하거나 추상적인 프롬프트에 특히 강점을 보였다.