ChartAct: 동적 차트 이해를 위한 벤치마크

연구진이 실제 환경의 인터랙티브 차트를 이해하도록 설계한 새 벤치마크 ChartAct를 공개했다.

ChartAct는 8개 웹사이트의 673개 차트와 1,440개의 QA 샘플로 구성되며, 7개 차트 유형과 두 가지 환경을 포함한다.

연구는 멀티모달 모델과 GUI 에이전트 등 11개 최신 모델을 평가했지만, 대부분이 동적 차트 추론에서 여전히 어려움을 보였다.

이 벤치마크는 hover, click, zoom, drag 같은 동작 후에야 핵심 정보가 드러나는 현실적 차트 QA의 한계를 드러낸다.