FinSage: 금융 보고서 질의응답을 위한 멀티모달 RAG 시스템의 혁신

본 기사는 금융 보고서 질의응답을 위한 혁신적인 멀티모달 RAG 시스템 FinSage에 대해 다룹니다. FinSage는 다양한 데이터 형식 처리, 질의 확장 및 메타데이터 기반 검색, DPO 기반 재순위 지정 모듈 등의 핵심 기능을 통해 높은 정확도와 효율성을 달성하며, 실제 금융 현장에서 성공적으로 활용되고 있습니다.

금융 업계의 복잡한 규정 준수는 기업들에게 큰 과제입니다. 최근 급증하는 데이터의 양과 다양한 형태(텍스트, 표, 다이어그램 등)는 이러한 어려움을 더욱 가중시키고 있습니다. 이러한 문제를 해결하기 위해, Xinyu Wang을 비롯한 14명의 연구진이 개발한 FinSage는 혁신적인 멀티모달 RAG(Retrieval-Augmented Generation) 시스템으로 주목받고 있습니다.

FinSage는 기존 RAG 시스템의 한계를 극복하기 위해 세 가지 핵심 요소를 도입했습니다.

첫째, 다양한 데이터 형식을 통합적으로 처리하는 멀티모달 전처리 파이프라인입니다. 이 파이프라인은 각 데이터 청크에 대한 메타데이터 요약을 생성하여 효율적인 정보 검색을 가능하게 합니다. 이는 단순히 텍스트만 처리하는 기존 시스템과 차별되는 중요한 특징입니다.

둘째, 질의 확장(HyDE)과 메타데이터 기반 의미 검색을 결합한 멀티패스 스파스-덴스 검색 시스템입니다. 이는 단순한 키워드 매칭을 넘어, 문맥과 의미를 고려한 정확한 정보 검색을 가능하게 합니다. 기존 시스템보다 훨씬 정교하고 효율적인 정보 검색을 제공하는 것입니다.

셋째, 직접 선호도 최적화(DPO)를 통해 미세 조정된 도메인 특화 재순위 지정 모듈입니다. 이 모듈은 규정 준수에 중요한 콘텐츠를 우선적으로 제시하여 정확성과 효율성을 더욱 높입니다. 이는 규정 준수라는 특수한 목적에 맞춰 시스템을 최적화한 결과입니다.

FinSage는 FinanceBench 질의응답 데이터셋에서 최고 기준 모델보다 정확도를 24.06% 향상시켰으며, 전문가가 작성한 75개 질문에 대해 92.51%의 인상적인 재현율을 달성했습니다. 더욱 놀라운 것은, FinSage가 온라인 회의에서 금융 질의응답 에이전트로 성공적으로 배포되어 이미 1,200명 이상의 사용자에게 서비스를 제공하고 있다는 점입니다. 이는 FinSage의 실제 현장 적용 가능성을 보여주는 훌륭한 사례입니다.

FinSage는 단순한 기술적 발전을 넘어, 금융 업계의 규정 준수와 효율성 향상에 실질적으로 기여하는 혁신적인 시스템입니다. 앞으로 더욱 발전된 FinSage를 통해 금융 분야의 정보 접근성과 의사결정의 정확성이 향상될 것으로 기대됩니다.