AnyBimanual: 단일 수동 조작 정책을 활용한 양손 조작의 혁신
AnyBimanual은 사전 훈련된 단일 수동 조작 정책을 활용하여 양손 조작 작업의 성공률을 크게 높인 혁신적인 방법입니다. 시뮬레이션과 실제 환경 모두에서 우수한 성능을 보이며, 고차원 행동 공간으로 인한 데이터 수집의 어려움을 해결하는 새로운 전략을 제시합니다.

가정용 서비스부터 산업용 조립까지, 다양한 분야에서 언어 기반의 일반적인 양손 조작 작업 수행은 매우 중요합니다. 하지만 고차원적인 행동 공간으로 인해 양손 조작 데이터 수집이 어려워 기존 방법으로는 일반적인 양손 조작 작업을 처리하는 데 어려움이 있었습니다.
이러한 문제를 해결하기 위해 Guanxing Lu 등 연구진은 AnyBimanual이라는 새로운 방법을 제시했습니다. AnyBimanual은 사전 훈련된 단일 수동 조작 정책을 일반적인 양손 조작 정책으로 전이하는 플러그 앤 플레이 방식입니다. 단일 수동 조작 정책은 대규모 모델 파라미터와 훈련 데이터 덕분에 다양한 작업에서 인상적인 일반화 성능을 보여주었으며, 이러한 지식을 양손 조작 시스템에 공유할 수 있다는 점에 착안했습니다.
AnyBimanual은 다음과 같은 두 가지 핵심 요소를 가지고 있습니다.
- 스킬 매니저: 사전 훈련된 단일 수동 조작 정책에서 발견된 스킬 표현을 동적으로 스케줄링하여 양손 조작 작업에 적용합니다. 작업 지향적인 보상과 스킬 원시들을 선형적으로 결합하여 양손 조작 지침을 나타냅니다.
- 비주얼 얼라이너: 단일 수동 및 양손 조작 시스템 간의 관찰 불일치를 완화하기 위해, 작업 공간의 시각적 임베딩에 소프트 마스크를 생성합니다. 이를 통해 각 팔의 단일 수동 조작 정책 모델의 시각적 입력을 사전 훈련 단계의 입력과 정렬합니다.
RLBench2의 12가지 시뮬레이션 작업에 대한 실험 결과, AnyBimanual은 기존 방법보다 성공률이 12.67% 향상되었으며, 9가지 실제 작업에서도 평균 성공률 **84.62%**를 달성하며 실용성을 입증했습니다. 이는 단일 수동 조작 정책의 효율적인 전이를 통해 양손 조작의 어려움을 극복하는 중요한 진전입니다.
이 연구는 양손 조작 분야의 발전에 크게 기여할 뿐만 아니라, 데이터 수집의 어려움을 해결하는 새로운 접근 방식을 제시하여 다른 복잡한 로봇 작업에도 적용될 가능성을 보여줍니다. 앞으로 AnyBimanual의 발전과 다양한 응용 분야에서의 활용이 기대됩니다.
Reference
[arxiv] AnyBimanual: Transferring Unimanual Policy for General Bimanual Manipulation
Published: (Updated: )
Author: Guanxing Lu, Tengbo Yu, Haoyuan Deng, Season Si Chen, Yansong Tang, Ziwei Wang
http://arxiv.org/abs/2412.06779v1