훈원프루버(HunyuanProver): AI가 수학 정리를 증명하다!
중국 연구진이 개발한 훈원프루버(HunyuanProver)는 70억 매개변수의 거대 언어 모델을 기반으로, 데이터 합성 프레임워크와 지도 트리 탐색 알고리즘을 활용하여 수학 정리 자동 증명 분야에서 최첨단 성능을 달성했습니다. 특히 4개의 IMO 문제를 증명하고 3만 개의 합성 데이터셋을 공개하며 학계에 크게 기여했습니다.

중국 연구팀이 개발한 훈원프루버(HunyuanProver)가 수학 정리 자동 증명 분야에 새로운 이정표를 세웠습니다. 70억 매개변수의 거대 언어 모델 훈원(Hunyuan)을 기반으로 개발된 이 시스템은 기존의 한계를 뛰어넘는 놀라운 성과를 보여주고 있습니다.
데이터 부족 문제, 혁신적인 해결책으로 돌파!
수학 정리 증명에 필요한 데이터는 매우 부족합니다. 이 문제를 해결하기 위해 연구팀은 확장 가능한 데이터 합성 프레임워크를 설계했습니다. 저렴한 비용으로 효율적으로 데이터를 생성하여 학습에 필요한 양질의 데이터를 확보한 것입니다. 이는 AI 모델 학습의 어려움을 극복하는 중요한 전략으로 평가받고 있습니다.
'시스템 2 사고'를 구현한 지도 트리 탐색 알고리즘
훈원프루버는 단순한 계산을 넘어, 복잡한 추론과 전략적인 사고가 필요한 '시스템 2 사고'를 구현하기 위해 지도 트리 탐색 알고리즘을 도입했습니다. 이를 통해 더욱 정교하고 효율적인 증명 과정이 가능해졌습니다. 이는 인공지능의 추론 능력 발전에 있어 중요한 진전입니다.
최첨단 성능과 국제수학올림피아드 문제 해결
훈원프루버는 주요 벤치마크에서 최첨단(SOTA) 성능을 달성했습니다. miniF2F-test에서 68.4%의 정확도를 기록하며 기존 최고 기록(65.9%)을 넘어섰습니다. 더욱 놀라운 것은 4개의 IMO(국제수학올림피아드) 문제(imo_1960_p2, imo_1962_p2, imo_1964_p2, imo_1983_p6) 를 증명하는 데 성공했다는 점입니다. 이는 인공지능이 고난도 수학 문제에 도전할 수 있는 가능성을 보여주는 괄목할 만한 성과입니다.
공개 데이터셋으로 연구 공동체에 기여
연구팀은 3만 개의 합성 데이터셋을 공개하여 연구 공동체에 기여하고 있습니다. 자연어 질문, 자동 형식화된 명제, 그리고 훈원프루버가 생성한 증명까지 포함된 이 데이터셋은 AI 기반 자동 정리 증명 분야의 발전에 크게 기여할 것으로 예상됩니다.
결론적으로, 훈원프루버는 AI 기반 자동 정리 증명 분야에 새로운 가능성을 열었습니다. 데이터 합성, 지도 트리 탐색 알고리즘, 그리고 공개 데이터셋은 앞으로 이 분야의 발전을 가속화하는 중요한 동력이 될 것입니다. 이 연구는 AI가 수학과 같은 복잡하고 추상적인 영역에서도 혁신적인 성과를 낼 수 있음을 보여주는 중요한 사례입니다.
Reference
[arxiv] HUNYUANPROVER: A Scalable Data Synthesis Framework and Guided Tree Search for Automated Theorem Proving
Published: (Updated: )
Author: Yang Li, Dong Du, Linfeng Song, Chen Li, Weikang Wang, Tao Yang, Haitao Mi
http://arxiv.org/abs/2412.20735v1