연구진이 복잡한 금융 문서 추론을 위한 벤치마크 FinanceComplexQA를 공개했어요. 실제 금융 업무 시나리오와 유사한 2,026개의 심층 연구 과제를 포함하고 있어요. FinanceComplexQA는 다국어 지원, 6가지 시나리오 커버, 전문가 수준의 질문, 복잡한 레이아웃 분석 등의 특징을 가지고 있어요.
FinanceComplexQA를 활용해 RAG 시스템과 에이전트 추론 도구를 평가한 결과, 수치 계산, 멀티홉 추론, 내용 요약, 산업 분석 등에서 한계점을 파악했어요.