AI 기반 집단 지성으로 진실을 향한 여정: 불확실성 속에서 빛나는 지혜
본 연구는 AI 기반 집단 지성을 활용하여 주장의 진실 확률을 추론하는 새로운 방법을 제시합니다. 온라인 실험을 통해 개인의 불확실성 평가를 정교하게 분석하고, 집단 추론의 정확도를 향상시키는 알고리즘을 개발했습니다. 이는 가짜뉴스 퇴치 및 민주적 담론 개선에 크게 기여할 잠재력을 지니고 있습니다.

AI 기반 집단 지성으로 진실을 향한 여정: 불확실성 속에서 빛나는 지혜
매일 우리는 수많은 주장들의 확률을 판단합니다. "90% 확신해요"와 같이 자신감의 정도를 표현함으로써, 다른 사람들은 우리 판단의 신뢰도를 가늠할 수 있습니다. 이러한 개인적 판단들이 모여 더 정확한 결론에 도달하는 것이 이상적이지만, 현실은 그렇지 않습니다. 개인의 판단은 완벽하지 않고, 집단 역학은 오류를 증폭시키거나 의견을 양극화시키기도 합니다.
Patrick Stinson을 비롯한 연구진은 인지과학, 구조화된 전문가 판단, 크라우드소싱의 통찰력을 결합하여, 인간의 확률 판단으로부터 주장의 진실 여부를 추론하는 획기적인 방법을 제시했습니다. 376명의 참가자들이 1200개의 일반 상식 관련 주장에 대한 확률을 평가하는 온라인 실험을 통해 이를 검증했습니다. (총 451,200개의 평가).
단순히 다수결로 진실을 판단하는 것(다수의 지혜)만으로도 개인적 판단보다 정확도가 높아짐을 확인했습니다. 하지만, 연구진은 연속적인 확률 등급을 사용하고, 개인의 정확성과 보정 수준을 고려함으로써 집단 추론의 정확도를 획기적으로 향상시켰습니다. 각 참가자의 정확성과 오류 보정을 나타내는 매개변수를 주장 확률과 함께 추론하는 비지도 학습 방식을 제시했습니다. 또한, 이 방식은 진실 여부를 활용한 지도 학습 방식과 보완적으로 사용될 수 있습니다.
이 연구는 온라인 커뮤니티가 집단 지성을 활용하여 주장의 확률을 판단하고, 불확실성을 잘 보정하는 방법을 제시합니다. 이는 가짜뉴스 퇴치 및 민주적 담론 개선에 크게 기여할 잠재력을 가지고 있습니다. 앞으로 이 알고리즘이 어떻게 발전하고 실제 사회에 적용될지 주목할 필요가 있습니다. 개인의 불완전한 판단에서 시작하여, AI 기반의 집단 지성을 통해 더 정확한 진실에 도달하는 과정은, 기술 발전과 사회 발전의 긍정적 상호 작용을 보여주는 좋은 사례입니다. 이는 단순한 기술적 발전을 넘어, 인류의 지식 탐구 방식 자체를 변화시킬 수 있는 혁신적인 시도로 평가할 수 있습니다.
Reference
[arxiv] Collective inference of the truth of propositions from crowd probability judgments
Published: (Updated: )
Author: Patrick Stinson, Jasper van den Bosch, Trenton Jerde, Nikolaus Kriegeskorte
http://arxiv.org/abs/2501.04983v1