STRIDE: 인간형 로봇 보행의 혁신, 보상 설계 자동화의 새 지평을 열다


STRIDE는 에이전트 엔지니어링과 LLM을 결합하여 인간형 로봇 보행 제어를 위한 보상 함수 설계를 자동화하는 혁신적인 프레임워크입니다. EUREKA보다 효율성과 성능이 250% 향상되었으며, 복잡한 지형에서 스프린트 수준의 보행을 가능하게 합니다.

related iamge

인간형 로봇 보행의 난제, 보상 함수 설계의 자동화

인간형 로봇은 고차원 시스템의 정밀한 조정과 제어를 필요로 하는 인공지능 분야의 큰 도전 과제입니다. 특히, 심층 강화 학습(DRL)을 이용한 인간형 로봇 보행 제어에서 효과적인 보상 함수를 설계하는 것은 상당한 어려움을 갖습니다. 수많은 수동 작업, 전문 지식, 그리고 반복적인 개선 과정이 필요하기 때문입니다.

STRIDE: 에이전트 엔지니어링과 LLM의 만남

이러한 어려움을 극복하기 위해, Zhenwei Wu 등 연구진은 STRIDE라는 획기적인 프레임워크를 개발했습니다. STRIDE는 에이전트 엔지니어링의 구조적 원칙과 대규모 언어 모델(LLM) 의 코드 작성, 제로샷 생성, 상황 내 최적화 기능을 결합하여 보상 함수를 자동화합니다. 특별한 프롬프트나 템플릿 없이도 보상 함수를 생성하고, 평가하고, 반복적으로 개선하는 것이 STRIDE의 핵심입니다.

놀라운 성능 향상: EUREKA를 뛰어넘다

다양한 환경과 인간형 로봇 형태를 사용한 실험 결과, STRIDE는 기존 최고 성능의 보상 설계 프레임워크인 EUREKA를 압도적으로 능가했습니다. 효율성과 작업 성능이 평균 **250%**나 향상된 것입니다. STRIDE로 생성된 보상 함수를 사용한 시뮬레이션 결과, 인간형 로봇은 복잡한 지형에서도 스프린트 수준의 보행을 달성했습니다.

새로운 가능성: DRL과 인간형 로봇 연구의 진보

STRIDE는 단순한 기술적 발전을 넘어, DRL 워크플로우와 인간형 로봇 연구에 새로운 가능성을 제시합니다. 보상 함수 설계의 자동화는 연구자들의 노력을 줄이고, 더욱 복잡하고 다양한 보행 과제에 도전할 수 있도록 합니다. 앞으로 STRIDE가 인간형 로봇의 실제 세계 적용을 앞당기는 데 중요한 역할을 할 것으로 기대됩니다. 이는 단순히 로봇 공학의 발전이 아닌, 인간과 로봇이 공존하는 미래 사회를 향한 중요한 한 걸음입니다.


*이 기사는 AI가 생성한 내용으로, 일부 정보가 실제와 다를 수 있습니다. 정확한 확인을 위해 추가적인 검증을 권장드립니다.

Reference

[arxiv] STRIDE: Automating Reward Design, Deep Reinforcement Learning Training and Feedback Optimization in Humanoid Robotics Locomotion

Published:  (Updated: )

Author: Zhenwei Wu, Jinxiong Lu, Yuxiao Chen, Yunxin Liu, Yueting Zhuang, Luhui Hu

http://arxiv.org/abs/2502.04692v3