CordViP: 현실 세계에서의 능숙한 조작을 위한 획기적인 AI 기술
중국 베이징항공우주대학교 연구팀이 개발한 CordViP은 3D 기반 모방 학습의 한계를 극복, 실제 세계에서 90%의 성공률로 섬세한 로봇 조작을 가능하게 합니다. 물체와 로봇의 6D 자세 추정 및 상호 작용 인식 포인트 클라우드를 활용하여 정확도와 일반화 능력을 높였습니다.

로봇이 사람처럼 섬세한 작업을 수행하는 것은 로봇 조작 분야의 오랜 꿈입니다. 최근 3D 기반 모방 학습의 발전은 이 목표 달성에 큰 가능성을 보여주고 있습니다. 하지만 단일 카메라로 얻은 3D 표현에는 한계가 존재합니다. 카메라 해상도, 위치, 그리고 로봇 손으로 인한 물체 가림 등이 3D 데이터 품질에 영향을 미치기 때문입니다. 특히, 섬세한 조작에는 필수적인 접촉 정보와 공간적 상관 관계가 부족하다는 문제점이 있습니다.
중국 베이징항공우주대학교(Beihang University) 연구팀은 이러한 문제를 해결하기 위해 새로운 프레임워크 CordViP을 개발했습니다. CordViP는 물체와 로봇의 견고한 6D 자세 추정과 로봇의 고유 감각을 활용하여 상관 관계를 구축하고 학습합니다. 핵심은 상호 작용 인식 포인트 클라우드의 도입입니다. 이를 통해 물체와 로봇 손 사이의 상관 관계를 효과적으로 설정하여 보다 정확한 3D 정보를 얻을 수 있습니다.
연구팀은 사전 훈련 과정에서 객체 중심 접촉 맵과 손-팔 조정 정보를 추가로 통합했습니다. 이는 공간적 및 시간적 역동성을 효과적으로 포착하여 더욱 정교한 조작을 가능하게 합니다. 실제 세계의 네 가지 작업에서 CordViP는 평균 90%의 성공률을 달성하여 기존 방법들을 압도하는 성능을 보였습니다. 더욱이, 다양한 물체, 시점, 상황에 대한 우수한 일반화 및 강건성을 입증했습니다.
CordViP 프로젝트 페이지에서 코드와 동영상을 확인할 수 있습니다. 이번 연구는 로봇 조작 분야의 획기적인 발전이며, 앞으로 더욱 발전된 인공지능 기반 로봇 시스템 개발에 중요한 이정표가 될 것으로 기대됩니다. CordViP의 등장으로 사람과 같은 섬세한 로봇 조작의 미래가 한층 더 가까워졌습니다. 하지만, 여전히 개선의 여지가 남아있으며, 더욱 다양한 환경과 작업에 대한 적용 연구가 필요할 것입니다. 특히, 예측 불가능한 상황에 대한 대처 능력 향상은 향후 연구 과제로 남아 있습니다.
Yankai Fu 등 11명의 연구자들이 이룬 놀라운 성과는 인공지능과 로봇 공학의 융합을 통해 더욱 발전된 미래를 향한 여정을 보여줍니다. 앞으로 CordViP 기반의 다양한 응용 기술들이 등장할 것으로 예상되며, 우리의 일상생활에 큰 변화를 가져올 가능성이 높습니다.
Reference
[arxiv] CordViP: Correspondence-based Visuomotor Policy for Dexterous Manipulation in Real-World
Published: (Updated: )
Author: Yankai Fu, Qiuxuan Feng, Ning Chen, Zichen Zhou, Mengzhen Liu, Mingdong Wu, Tianxing Chen, Shanyu Rong, Jiaming Liu, Hao Dong, Shanghang Zhang
http://arxiv.org/abs/2502.08449v1