FilmBench: 영화급 시네마틱 비디오 생성을 위한 벤치마크

연구진이 수상작 영화 클립과 전문 영화 용어를 바탕으로 한 영상 생성 평가 벤치마크 FilmBench를 공개했다.

FilmBench는 text-to-video와 reference-to-video 시스템을 대상으로, 3단계 메트릭 체계와 전문가용 자동 평가기를 적용한다.

오픈소스 FilmOps 연산자도 함께 제공돼, 더 정교한 영화적 프롬프트와 평가를 가능하게 한다.

실험 결과, 주요 모델들의 순위는 사람 평가와 잘 맞았지만 전반 점수는 낮았고 멀티샷 성능은 특히 약했다.

이 벤치마크는 단순 웹 스타일 기준보다 영화 산업 수준의 평가로 AI 영상 생성의 약점을 더 분명히 드러낸다.