언어 바꾸기English
이전 목록

FinanceComplexQA: 산업급 금융 문서를 대상으로 한 에이전틱 추론 벤치마킹

FinanceComplexQA: Benchmarking Agentic Reasoning on Industrial-grade Financial Documents

TL;DR AI

핵심 요약

1분
  1. 연구진은 복잡한 금융 문서에서 에이전트형 추론 성능을 평가하기 위한 벤치마크 FinanceComplexQA를 공개했다.

  2. 이 벤치마크는 합성 문서 생성 스킬, 2,000개의 금융 문서, 6,000개의 QA 쌍, 그리고 1,009개 문서에 걸친 2,026개의 개방형 과제를 포함한다.

  3. 또한 이중언어 평가를 지원하며, 추론·요약·수치 정확도를 여러 지표로 측정한다.

  4. FinanceComplexQA는 금융 분석과 RAG 환경에서 AI 시스템을 개선하기 위한 현실적이고 난도 높은 테스트베드다.

원문 보기