딥마인드, AI 비디오 생성 모델의 ‘진짜’ 지능 평가: 물리 법칙 이해하나?
딥마인드 연구팀은 AI 비디오 생성 모델의 물리적 원리 이해 능력을 평가하는 Physics-IQ 벤치마크를 개발하여, 시각적 사실성과 물리적 이해 간의 상관관계가 미약함을 밝혔습니다. 일부 성공 사례를 통해 관찰 기반 물리적 원리 학습의 가능성을 제시하였으나, 아직 넘어야 할 과제가 많음을 강조했습니다.

AI가 세상을 얼마나 이해할까? 딥마인드의 놀라운 연구 결과
최근 AI 비디오 생성 기술이 눈부시게 발전하면서, 새로운 질문이 제기되었습니다. 과연 AI는 단순히 영상의 화소를 예측하는 것 이상으로, 물리 법칙과 같은 세상의 원리를 이해하고 있는 것일까요? 딥마인드 연구팀(Saman Motamed, Laura Culp, Kevin Swersky, Priyank Jaini, Robert Geirhos)은 이 질문에 대한 답을 찾기 위해 Physics-IQ라는 획기적인 벤치마크 데이터셋을 개발했습니다.
Physics-IQ는 유체 역학, 광학, 고체 역학, 자기 및 열역학 등 다양한 물리적 원리를 심층적으로 이해해야만 해결 가능한 문제들로 구성되어 있습니다. 연구팀은 Sora, Runway, Pika, Lumiere, Stable Video Diffusion, VideoPoet 등 최첨단 AI 비디오 생성 모델들을 대상으로 Physics-IQ를 적용하여 실험을 진행했습니다. 결과는 놀라웠습니다. 대부분의 모델들이 시각적 사실성은 높았지만, 물리적 원리에 대한 이해는 매우 제한적이었으며, 시각적 사실성과는 상관관계가 거의 없다는 사실이 밝혀졌습니다.
하지만 모든 모델이 완전히 실패한 것은 아닙니다. 일부 테스트 케이스는 성공적으로 해결되었는데, 이는 관찰만으로 특정 물리적 원리를 습득하는 것이 가능하다는 것을 시사합니다. 이는 AI가 단순한 '픽셀 예측기'를 넘어, 세상의 원리를 이해하는 방향으로 진화할 가능성을 보여주는 중요한 발견입니다.
물론 아직 극복해야 할 과제가 많습니다. 연구팀은 시각적 사실성과 물리적 이해는 별개의 문제임을 강조하며, 앞으로 AI가 물리적 원리를 더욱 정확하게 이해할 수 있도록 연구를 지속할 것을 밝혔습니다. 이번 연구는 AI의 진정한 지능을 평가하는 새로운 기준을 제시하며, AI 발전의 방향에 중요한 함의를 던져주는 의미있는 결과입니다. 자세한 내용은 프로젝트 페이지 와 코드 에서 확인할 수 있습니다.
결론: AI 비디오 생성 모델의 시각적 사실성이 향상되고 있지만, 물리적 원리에 대한 이해는 아직 미흡하다는 사실이 밝혀졌습니다. 하지만 관찰을 통한 물리적 원리 학습 가능성을 확인하며, AI의 지능 발전에 대한 새로운 가능성을 제시했습니다.
Reference
[arxiv] Do generative video models learn physical principles from watching videos?
Published: (Updated: )
Author: Saman Motamed, Laura Culp, Kevin Swersky, Priyank Jaini, Robert Geirhos
http://arxiv.org/abs/2501.09038v1