던지는 에이전트와 잡는 에이전트의 대결: 이중 로봇 손으로 혁신적인 물체 조작 기술 개발


김태우, 윤영우, 김재홍 연구팀은 이종 에이전트 강화학습(HARL)을 이용한 혁신적인 이수동작(bimanual catching) 기술을 개발했습니다. 경쟁적 협력 학습 방식을 통해 15가지 다양한 물체에 대해 기존 방식보다 약 2배 향상된 성능을 달성, 로봇 물체 조작 기술의 새로운 가능성을 제시했습니다.

related iamge

로봇이 물건을 잡는 기술, 특히 하나의 로봇 손만 사용하는 경우는 어느 정도 성숙기에 접어들었습니다. 하지만 더 크고 복잡한 물체를 다루는 데에는 한계가 있죠. 이 문제를 해결하기 위해 김태우, 윤영우, 김재홍 연구팀은 두 개의 로봇 손을 사용하는 '이수동작(bimanual catching)' 기술에 주목했습니다.

이 논문의 핵심은 바로 '경쟁적 협력 이종 에이전트 강화학습(adversarial-cooperative HARL)' 입니다. 마치 훈련처럼, '던지는 에이전트'와 '잡는 에이전트'라는 두 개의 서로 다른 로봇 에이전트가 등장합니다. 던지는 에이전트는 속도를 조절하며 점점 더 어려운 난이도로 물체를 던지고, 잡는 에이전트는 두 개의 로봇 손을 정교하게 협력하여 이를 잡는 훈련을 반복합니다. 이를 통해 잡는 에이전트는 예측 불가능한 상황에서도 물체를 잡는 능숙한 기술을 습득하게 됩니다.

연구팀은 15가지 다양한 물체를 사용한 시뮬레이션을 통해 이 방법의 효과를 검증했습니다. 결과는 놀라웠습니다. 기존의 단일 에이전트 방식에 비해 잡는 성공률이 약 2배나 증가했습니다! 이는 다양한 형태와 크기의 물체를 다루는 데 있어 이 방법의 뛰어난 적응력과 견고성을 보여줍니다.

단순한 로봇 팔의 움직임을 넘어, 마치 사람처럼 두 손을 이용해 물체를 자유자재로 다루는 로봇 기술의 발전은 물류 자동화, 수술 로봇 등 다양한 분야에 혁신을 가져올 것으로 기대됩니다. 이 연구는 그 가능성을 한층 더 높여주는 중요한 이정표가 될 것입니다. 앞으로 더욱 발전된 기술을 통해 더욱 복잡하고 정교한 작업 수행이 가능해질 것으로 전망됩니다.


*이 기사는 AI가 생성한 내용으로, 일부 정보가 실제와 다를 수 있습니다. 정확한 확인을 위해 추가적인 검증을 권장드립니다.

Reference

[arxiv] Learning Dexterous Bimanual Catch Skills through Adversarial-Cooperative Heterogeneous-Agent Reinforcement Learning

Published:  (Updated: )

Author: Taewoo Kim, Youngwoo Yoon, Jaehong Kim

http://arxiv.org/abs/2502.11437v1