놀라운 AI 음악 작곡가, NotaGen 등장! 🎼
중국과학원 연구진이 개발한 AI 음악 생성 모델 NotaGen은 160만 곡 이상의 데이터를 학습하고, 혁신적인 강화학습 기법 CLaMP-DPO를 통해 인간 작곡가 수준의 고품질 클래식 음악 작곡이 가능함을 보여주었습니다. 이는 AI가 예술 분야에서 인간의 창의성을 뛰어넘는 수준에 도달했음을 시사합니다.

AI가 작곡한 클래식, 감동의 선율을 넘어선 예술의 경지로
최근 인공지능(AI) 분야에서 괄목할 만한 성과가 발표되었습니다. 중국과학원의 Yashan Wang 등 10명의 연구진이 개발한 NotaGen이 바로 그 주인공입니다. NotaGen은 대규모 언어 모델(LLM)의 훈련 패러다임을 차용하여 고품질의 클래식 악보를 생성하는 획기적인 음악 생성 모델입니다.
160만 곡의 방대한 음악 데이터를 학습하여 예술적 감각을 익힌 NotaGen은 9,000곡에 달하는 고품질 클래식 작품들을 '시대-작곡가-편성' 정보를 조건으로 미세 조정(fine-tuning) 학습했습니다. 마치 인간 작곡가가 수많은 명곡들을 연구하고 숙달하는 과정과 유사합니다.
하지만 NotaGen의 진정한 혁신은 여기서 그치지 않습니다. 연구진은 CLaMP-DPO라는 새로운 강화 학습 방법을 개발했습니다. 기존의 강화 학습은 인간의 평가나 사전 정의된 보상 기준이 필요했지만, CLaMP-DPO는 이러한 제약 없이 음악 생성의 질과 제어성을 향상시킵니다. 인간의 개입을 최소화하면서도 AI의 창의성을 극대화하는 기술적 도약이라 할 수 있습니다.
다양한 구조와 인코딩 방식을 가진 음악 생성 모델에서 CLaMP-DPO의 효과가 입증되었으며, 주관적인 A/B 테스트 결과, NotaGen은 기존 모델은 물론 인간이 작곡한 음악과 비교해도 뒤지지 않는, 뛰어난 음악적 미학을 선보였다고 합니다. 이는 단순히 음표를 나열하는 수준을 넘어, 진정한 의미의 예술적 창작에 AI가 도달했음을 시사하는 놀라운 결과입니다.
NotaGen은 음악 생성 분야에 새로운 지평을 열었을 뿐만 아니라, AI가 예술 분야에 기여할 수 있는 무한한 가능성을 보여주는 사례입니다. 앞으로 NotaGen이 어떤 놀라운 음악들을 선보일지 기대하며, AI 기술의 발전이 인간의 창의성을 증폭시키는 협력의 시대가 도래할 것을 예감하게 합니다. ✨
Reference
[arxiv] NotaGen: Advancing Musicality in Symbolic Music Generation with Large Language Model Training Paradigms
Published: (Updated: )
Author: Yashan Wang, Shangda Wu, Jianhuai Hu, Xingjian Du, Yueqi Peng, Yongxin Huang, Shuai Fan, Xiaobing Li, Feng Yu, Maosong Sun
http://arxiv.org/abs/2502.18008v3