AI, 주식 투자 분석 벤치마크에서 실적 부진
Key Point
최신 AI 모델들이 종합적 분석은 잘하지만 실제 투자 예측으로 이어지지 못한다는 구체적인 성과 격차를 드러내, AI 금융 분석 능력의 현주소를 파악할 수 있다.
핵심 요약
- 금융 에이전트는 현재 시점의 정보만으로 투자 판단을 내려야 하며, 그 예측은 이후의 실제 결과로 평가받는다.
- 기존 벤치마크는 금융 지식·분석 워크플로·예측 능력을 각각 평가했으나, 완전한 연구 프로세스를 평가하려면 정보가 고정된 상태와 전문가 평가 기준이 필요하다.
- ILE(Investor's Last Exam)는 경험 많은 펀드 매니저들이 주도한 주식 분석 벤치마크로, 342만 개 문서 버전과 9가지 소스를 담은 금융 데이터베이스, 시계열 타임스탬프가 적용된 시장 데이터, 전문가가 설계한 평가 기준을 포함한다.