똑똑한 전문가에게 질문하세요: RopMura - 다중 에이전트 질의응답 시스템


Wu Feijie 등 연구진이 개발한 RopMura는 다중 에이전트 시스템을 통해 LLM 기반 질의응답 시스템의 정확성과 효율성을 크게 향상시킨 시스템입니다. 지능형 라우팅과 다단계 질문 계획 기능을 통해 복잡한 질문에도 정확한 답변을 제공하며, 다양한 분야의 지식을 통합하여 더욱 폭넓은 질문에 대응할 수 있습니다.

related iamge

최근 급부상하는 대규모 언어 모델(LLM)은 놀라운 성능을 보여주지만, 단일 지식 베이스에 의존하는 한계로 인해 도메인을 넘나드는 복잡한 질문에는 정확성이 떨어지거나 잘못된 답변을 생성하는 경우가 많습니다. 마치 어떤 전문가에게 질문해야 할지 모르는 상황과 같죠. Wu Feijie 등 연구진은 이러한 문제점을 해결하기 위해 혁신적인 다중 에이전트 시스템, RopMura를 제안했습니다.

RopMura는 '라우터' 와 '플래너' 라는 두 가지 핵심 요소를 통해 작동합니다. 라우터는 질문의 내용을 분석하여 가장 적합한 에이전트(전문가)를 선택하는 역할을 수행합니다. 마치 병원에서 환자의 증상에 따라 적절한 진료과를 안내하는 것과 같습니다. 플래너는 복잡한 질문을 여러 단계의 간단한 질문으로 분해하여 각 에이전트에게 효율적으로 질문을 전달하고, 최종 답변을 종합합니다. 이를 통해 단일 도메인을 넘어선 복잡한 질문에도 정확하고 효율적인 답변을 얻을 수 있게 됩니다.

RopMura의 핵심 기능:

  • 지능형 라우팅: 질문의 내용과 각 에이전트의 전문 지식 영역을 고려하여 가장 적합한 에이전트를 선택합니다. 단순히 모든 에이전트에게 질문을 던지는 것이 아니라, 최적의 에이전트에게 질문을 집중시킴으로써 효율성을 높입니다.
  • 다단계 질문 계획: 복잡한 질문을 여러 개의 작은 질문으로 분해하여 각 에이전트가 처리할 수 있는 범위 내에서 질문을 처리하고, 각 질문에 대한 답변을 종합하여 최종 답변을 생성합니다. 이를 통해 복잡한 질문에 대한 정확도를 높일 수 있습니다.

실험 결과, RopMura는 단일 질문과 다단계 질문 모두에서 높은 정확도를 보였습니다. 특히, 복잡한 다단계 질문에 대해서는 라우팅과 계획 기능이 결합되어 정확한 답변을 제공하는 데 탁월한 성능을 보였습니다. RopMura는 다양한 분야의 전문 지식을 통합하여 더욱 정확하고 신뢰할 수 있는 질의응답 시스템을 구축하는 데 중요한 발걸음이 될 것으로 기대됩니다.

하지만, 여러 지식베이스 통합 과정에서 발생할 수 있는 데이터 주권 문제 및 각 에이전트의 전문성 범위 설정과 같은 해결해야 할 과제도 남아있습니다. RopMura의 발전은 앞으로 LLM 기반 질의응답 시스템의 새로운 가능성을 제시하는 중요한 이정표가 될 것입니다.


*이 기사는 AI가 생성한 내용으로, 일부 정보가 실제와 다를 수 있습니다. 정확한 확인을 위해 추가적인 검증을 권장드립니다.

Reference

[arxiv] Talk to Right Specialists: Routing and Planning in Multi-agent System for Question Answering

Published:  (Updated: )

Author: Feijie Wu, Zitao Li, Fei Wei, Yaliang Li, Bolin Ding, Jing Gao

http://arxiv.org/abs/2501.07813v1