FINESSE-Bench: 대규모 언어 모델을 위한 금융 도메인 지식 및 기술적 분석의 계층형 벤치마크 모음
FINESSE-Bench: A Hierarchical Benchmark Suite for Financial Domain Knowledge and Technical Analysis in Large Language Models
TL;DR AI
1분핵심 요약
연구진은 금융 분야 대형 언어모델을 다층적으로 평가하기 위한 계층형 벤치마크 FINESSE-Bench를 공개했다.
이 벤치마크는 자격시험, 트레이딩 과제, 러시아어 올림피아드 등을 포함한 8개 데이터셋의 3,993문항으로 구성된다.
객관식, 수치형, 자유응답을 아우르는 통합 채점 방식으로 모델 간 비교의 일관성을 높였다.
이를 통해 LLM이 기초적인 금융 Q&A를 넘어 실제 금융 전문 업무를 수행할 수 있는지 확인할 수 있다.