AdaptBot: LLM, 지식 그래프, 그리고 인간의 만남 - 로봇의 놀라운 적응력
AdaptBot은 LLM, 지식 그래프, 인간 입력을 결합하여 로봇의 새로운 작업 적응력을 향상시킨 프레임워크입니다. 실험 결과, LLM만 사용하는 경우보다 상당한 성능 향상을 보였으며, 인간-AI 협력의 중요성을 보여줍니다.

새로운 요리법을 따라 요리를 하던 로봇이 갑자기 탕비실 청소를 해야 한다면 어떻게 될까요? 기존 학습 데이터만으로는 새로운 상황에 적응하기 어려울 것입니다. Shivam Singh 등 7명의 연구자는 이러한 문제를 해결하기 위해 AdaptBot이라는 흥미로운 프레임워크를 제시했습니다.
AdaptBot은 대규모 언어 모델(LLM) 과 지식 그래프(KG) , 그리고 인간의 입력이라는 세 가지 강력한 요소를 결합합니다. LLM은 다양한 영역에 대한 방대한 지식을 바탕으로 새로운 작업에 대한 추상적인 행동 순서를 예측합니다. 하지만 이 예측은 로봇의 물리적 제약이나 특정 도메인의 제한사항을 고려하지 않을 수 있습니다.
여기서 KG가 중요한 역할을 합니다. KG는 도메인 특화 지식을 담고 있어, LLM의 추상적인 계획을 로봇이 실행 가능한 구체적인 단계로 변환하는 데 도움을 줍니다. 마치 숙련된 요리사가 LLM의 레시피 초안을 보고 실제 조리 과정에 맞게 수정하는 것과 같습니다.
하지만 LLM과 KG만으로는 완벽하지 않습니다. 때로는 예상치 못한 상황이나 부족한 정보로 인해 로봇이 어려움을 겪을 수 있습니다. 이때 인간의 개입이 필요합니다. AdaptBot은 필요에 따라 인간에게 도움을 요청하고, 인간의 피드백을 통해 KG를 정제하여 로봇의 지식을 풍부하게 합니다.
연구팀은 시뮬레이션 환경에서 요리와 청소 작업을 통해 AdaptBot을 평가했습니다. 그 결과, LLM만 사용하는 경우보다 AdaptBot이 훨씬 뛰어난 성능을 보였습니다. 이는 LLM, KG, 그리고 인간의 상호 작용이 시너지 효과를 발휘하여 로봇의 적응력을 크게 향상시킨다는 것을 의미합니다.
AdaptBot은 단순한 로봇 제어 시스템을 넘어, 인간과 AI의 협력을 통해 새로운 문제에 유연하게 대처하는 지능형 시스템의 가능성을 보여줍니다. 이는 앞으로 더욱 복잡하고 다양한 작업을 수행해야 하는 로봇들에게 매우 중요한 의미를 지닙니다. 인간의 지혜와 AI의 능력이 결합된 미래의 로봇 시스템을 기대해 봅니다.
Reference
[arxiv] AdaptBot: Combining LLM with Knowledge Graphs and Human Input for Generic-to-Specific Task Decomposition and Knowledge Refinement
Published: (Updated: )
Author: Shivam Singh, Karthik Swaminathan, Nabanita Dash, Ramandeep Singh, Snehasis Banerjee, Mohan Sridharan, Madhava Krishna
http://arxiv.org/abs/2502.02067v1