획기적인 모방학습: 관찰만으로 로봇에게 격투기까지 가르치다!
Anish Abhijit Diwan 등이 개발한 NEAR(Noise-conditioned Energy-based Annealed Rewards)는 관찰만으로 복잡한 로봇 동작을 학습하는 혁신적인 모방 학습 프레임워크입니다. 잡음을 활용한 에너지 함수 학습을 통해 매끄럽고 안정적인 보상 함수를 생성하며, 휴머노이드 로봇의 보행 및 격투기 동작 학습에서 기존의 AMP와 비교하여 우수한 성능을 보였습니다.

혁신적인 AI 모방 학습 프레임워크, NEAR 등장!
최근, 인공지능 분야에서 괄목할 만한 연구 결과가 발표되었습니다. Anish Abhijit Diwan, Julen Urain, Jens Kober, Jan Peters 등이 주도한 연구팀이 관찰만으로 복잡한 로봇 동작을 학습하는 새로운 모방 학습 프레임워크, NEAR(Noise-conditioned Energy-based Annealed Rewards) 를 개발한 것입니다.
기존의 모방 학습은 전문가의 동작 데이터를 직접적으로 활용하는 데 반해, NEAR는 전문가의 움직임을 관찰만으로 학습합니다. 이는 마치 사람이 다른 사람의 행동을 보고 배우는 것과 유사한 방식입니다. 이는 에너지 기반 생성 모델을 활용하여 전문가 동작 데이터에 잡음을 추가하고, 이를 통해 얻은 다양한 데이터 분포의 에너지 함수를 학습하는 혁신적인 접근 방식을 통해 가능해졌습니다.
잡음을 활용한 에너지 함수 학습: 핵심 기술
NEAR의 핵심은 잡음을 추가한 전문가 동작 데이터 분포를 학습하는 것입니다. 연구팀은 이를 통해 매끄럽고, 잘 정의된 데이터 분포의 에너지 함수를 얻을 수 있었습니다. 이렇게 얻어진 에너지 함수는 보상 함수로 사용되어 강화 학습을 통해 로봇에게 최적의 동작을 학습시킵니다. 특히, 학습된 에너지 함수들을 점진적으로 전환하는 전략을 통해 보상 함수의 안정성을 확보, 학습 과정의 안정성을 높였습니다.
놀라운 성능: 휴머노이드 로봇의 보행 및 격투기 동작 학습 성공!
NEAR는 휴머노이드 로봇의 보행과 격투기 동작 학습에 적용되어 그 성능을 입증했습니다. 기존의 AMP(Adversarial Motion Priors) 와 비교했을 때, 여러 정량적 지표에서 비슷하거나 더 나은 결과를 보였습니다. 이는 적대적 모방 학습 기법의 최적화 문제를 해결하고, 더욱 안정적이고 효율적인 학습을 가능하게 함을 의미합니다.
미래 전망: 인간-로봇 상호작용의 새로운 지평
NEAR는 단순한 모방 학습을 넘어, 인간-로봇 상호작용의 새로운 지평을 열 것으로 기대됩니다. 관찰만으로 복잡한 동작을 학습할 수 있다는 것은 로봇의 활용 가능성을 획기적으로 높이는 의미를 지닙니다. 앞으로 더욱 발전된 NEAR를 통해 더욱 정교하고 자연스러운 로봇 동작을 기대할 수 있게 되었습니다.
참고: 본 기사는 제공된 정보를 바탕으로 작성되었으며, 과학적 정확성을 유지하기 위해 노력했습니다. 하지만, 전문적인 해석이나 추가적인 검증 없이 이 정보를 활용하는 것은 권장하지 않습니다.
Reference
[arxiv] Noise-conditioned Energy-based Annealed Rewards (NEAR): A Generative Framework for Imitation Learning from Observation
Published: (Updated: )
Author: Anish Abhijit Diwan, Julen Urain, Jens Kober, Jan Peters
http://arxiv.org/abs/2501.14856v2