과학적 난제 해결의 새 지평: Aviary로 훈련된 언어 에이전트의 혁신


본 기사는 과학적 난제 해결을 위한 혁신적인 언어 에이전트 훈련 환경 'Aviary'에 대해 소개합니다. Aviary는 다단계 추론과 현대 생물학 연구 관련 과제에 초점을 맞춰 개발되었으며, 오픈소스 LLM 기반 에이전트가 최첨단 LLM 및 전문가 수준의 성능을 보이는 놀라운 결과를 제시합니다. 추론 비용 절감 효과 또한 뛰어나 과학 연구의 효율성 향상에 크게 기여할 것으로 예상됩니다.

related iamge

복잡한 현실 세계 문제 해결의 핵심: 반복적인 행동과 관찰

Siddharth Narayanan 등 11명의 연구진이 발표한 논문 "Aviary: training language agents on challenging scientific tasks"는 복잡한 과학적 과제 해결에 있어 반복적인 행동과 관찰의 중요성을 강조합니다. 과학적 연구는 분석, 도구 사용, 실험 등의 반복적인 과정을 필요로 하며, 이러한 과정을 자동화하는 것이 핵심 과제입니다.

언어 에이전트: 과학적 지적 과제 자동화의 희망

연구진은 자연어 또는 코드를 통해 도구와 상호 작용할 수 있는 언어 에이전트가 과학적 지적 과제 자동화에 유망하다고 제시합니다. 하지만 에이전트의 유연성은 내부 추론, 계획, 도구 사용 및 언어 모델의 확률적 특성 등으로 인해 소프트웨어 구현에 어려움을 야기합니다.

Aviary: 확장 가능한 언어 에이전트 체육관

이러한 문제를 해결하기 위해 연구진은 확장 가능한 언어 에이전트 체육관인 'Aviary'를 소개합니다. Aviary는 에이전트를 언어 기반 부분 관측 마르코프 결정 과정(Language Decision Processes)을 해결하는 정책으로 공식화합니다.

세 가지 까다로운 과학 환경 구현: 유전자 조작, 문헌 조사, 단백질 공학

Aviary는 다단계 추론 및 현대 생물학 연구와의 관련성에 중점을 두어 세 가지 과학 환경을 포함한 다섯 가지 환경을 구현했습니다.

  1. 분자 클로닝을 위한 DNA 구조 조작: 유전자 조작 기술을 통해 특정 DNA 서열을 조작하는 과정을 에이전트가 수행하도록 합니다.
  2. 과학 문헌 접근을 통한 연구 질문 답변: 방대한 과학 문헌을 검색하고 분석하여 연구 질문에 대한 답을 찾는 능력을 평가합니다.
  3. 단백질 안정성 공학: 단백질의 구조를 설계하고 안정성을 예측하는 과정을 자동화합니다.

놀라운 결과: 오픈소스 LLM 기반 에이전트의 뛰어난 성능

온라인 훈련 및 추론 시간 컴퓨팅 확장을 통해 연구진은 오픈소스, 비 최첨단 LLM을 기반으로 하는 언어 에이전트가 최첨단 LLM 에이전트 및 인간 전문가와 동등하거나 그 이상의 성능을 보이며, 추론 비용을 최대 100배까지 절감할 수 있음을 보여주었습니다. 이는 과학 연구의 효율성을 획기적으로 높일 수 있는 잠재력을 시사합니다.

결론: 과학 연구의 미래를 위한 혁신적인 도약

Aviary는 과학 연구의 자동화를 위한 새로운 가능성을 제시하며, 오픈소스 LLM을 활용한 언어 에이전트의 놀라운 성능은 과학 연구의 패러다임 변화를 예고합니다. 앞으로 Aviary를 기반으로 더욱 복잡하고 다양한 과학적 문제에 대한 해결책을 찾을 수 있을 것으로 기대됩니다. 이는 단순한 기술 발전을 넘어, 인류의 지식 탐구에 새로운 장을 열 수 있는 획기적인 발견이라 할 수 있습니다.


*이 기사는 AI가 생성한 내용으로, 일부 정보가 실제와 다를 수 있습니다. 정확한 확인을 위해 추가적인 검증을 권장드립니다.

Reference

[arxiv] Aviary: training language agents on challenging scientific tasks

Published:  (Updated: )

Author: Siddharth Narayanan, James D. Braza, Ryan-Rhys Griffiths, Manu Ponnapati, Albert Bou, Jon Laurent, Ori Kabeli, Geemi Wellawatte, Sam Cox, Samuel G. Rodriques, Andrew D. White

http://arxiv.org/abs/2412.21154v1