AI의 놀라운 발전 속도: 5년 안에 한 달치 작업 자동화 가능성?
최근 연구에 따르면 AI의 작업 완료 시간이 7개월마다 두 배씩 증가하고 있으며, 이 추세가 지속된다면 5년 안에 AI가 현재 인간이 한 달 걸리는 많은 작업을 자동화할 수 있을 것으로 예측됩니다. 이는 AI의 신뢰성, 실수 복구 능력, 논리적 추론 및 도구 사용 능력 향상에 기인하며, AI 기술의 급속한 발전과 그 파급 효과를 보여주는 중요한 사례입니다.

최근 발표된 연구 논문 "Measuring AI Ability to Complete Long Tasks"는 AI의 능력을 측정하는 새로운 방법과 놀라운 결과를 제시하여 주목받고 있습니다. 토마스 콰(Thomas Kwa)를 비롯한 24명의 연구진은 AI 시스템의 능력을 인간의 능력과 비교하여 정량화하는 새로운 지표, 바로 **'50% 작업 완료 시간 지평선'**을 제안했습니다.
이 지표는 AI 모델이 50%의 성공률로 완료할 수 있는 작업을 인간이 완료하는 데 걸리는 시간을 측정한 것입니다. 연구팀은 다양한 작업(RE-Bench, HCAST, 그리고 66개의 새로운 단기 작업)을 통해 인간 전문가의 작업 시간을 측정하고, 이를 기준으로 최첨단 AI 모델(Claude 3.7 Sonnet 등)의 성능을 평가했습니다.
결과는 놀라웠습니다. 현재 최첨단 AI 모델의 50% 작업 완료 시간 지평선은 약 50분으로 나타났습니다. 더욱 놀라운 사실은 2019년 이후 이 시간 지평선이 7개월마다 두 배씩 증가하고 있다는 것입니다. 특히 2024년에는 그 증가 속도가 더욱 빨라진 것으로 보입니다.
이러한 급속한 성능 향상은 단순히 처리 속도의 증가만이 아니라, AI 모델의 신뢰성, 실수 복구 능력, 논리적 추론 및 도구 사용 능력의 향상에 기인한다는 점이 중요합니다. 이는 AI의 지능 수준 자체가 향상되고 있음을 의미합니다.
연구팀은 이 결과의 외부 타당성(external validity) 등 제한점을 언급하며, 위험한 기능의 자율성 증가에 대한 시사점을 논의했습니다. 하지만 연구 결과가 실제 소프트웨어 작업에 일반화될 경우, 5년 안에 AI 시스템이 현재 인간이 한 달 걸리는 많은 소프트웨어 작업을 자동화할 수 있을 것이라는 예측을 내놓았습니다.
이 연구는 AI 기술의 급속한 발전과 그 파급 효과를 보여주는 중요한 사례입니다. AI의 발전이 가져올 변화에 대한 긍정적 기대와 동시에, 윤리적, 사회적 문제에 대한 심도있는 고찰이 필요한 시점입니다. 5년 후의 세상은 어떻게 변해 있을까요?
Reference
[arxiv] Measuring AI Ability to Complete Long Tasks
Published: (Updated: )
Author: Thomas Kwa, Ben West, Joel Becker, Amy Deng, Katharyn Garcia, Max Hasin, Sami Jawhar, Megan Kinniment, Nate Rush, Sydney Von Arx, Ryan Bloom, Thomas Broadley, Haoxing Du, Brian Goodrich, Nikola Jurkovic, Luke Harold Miles, Seraphina Nix, Tao Lin, Neev Parikh, David Rein, Lucas Jun Koba Sato, Hjalmar Wijk, Daniel M. Ziegler, Elizabeth Barnes, Lawrence Chan
http://arxiv.org/abs/2503.14499v1