4억 명 사용자를 사로잡은 쿠아이쇼우의 AI 추천 시스템 비밀: CRM 모델
쿠아이쇼우의 새로운 AI 추천 시스템 CRM은 회귀 정보를 통합하여 사용자의 관심사와 시청 시간을 동시에 고려, 더욱 효과적인 콘텐츠 추천을 실현했습니다. 4억 명 이상의 사용자를 대상으로 한 A/B 테스트를 통해 그 효과가 검증되었습니다.

중국 대표 숏 비디오 플랫폼 쿠아이쇼우는 어떻게 4억 명이 넘는 사용자에게 매일 최적의 콘텐츠를 추천할 수 있을까요? 그 비결 중 하나는 바로 CRM(Controllable Retrieval Model) 이라는 새로운 AI 추천 시스템에 있습니다.
기존 추천 시스템은 사용자의 관심사에 맞는 콘텐츠를 찾는 '검색' 단계와, 검색 결과 중 최고의 콘텐츠를 선별하는 '순위' 단계로 나뉩니다. 문제는 기존 검색 단계가 주로 클릭률만 고려하여 시청 시간과 같은 다른 중요한 요소를 반영하지 못했다는 점입니다.
하지만 쿠아이쇼우 연구진(류치, 조장샤 등)이 개발한 CRM은 다릅니다. CRM은 두 개의 타워 구조(two-tower retrieval paradigm) 를 기반으로 하여, 시청 시간과 같은 회귀 정보를 조건부 특징으로 통합 합니다. 마치 사용자의 관심사와 시청 시간이라는 두 가지 조건을 동시에 만족하는 콘텐츠를 찾는 것과 같습니다. 이를 통해 검색 단계에서부터 순위 단계의 목표와 차이를 줄이고, 사용자의 관심사에 더욱 부합하는 콘텐츠를 효과적으로 검색할 수 있습니다.
이는 단순히 클릭률만 높이는 것이 아니라, 사용자가 실제로 더 오랫동안 시청하고 즐길 수 있는 콘텐츠를 추천하는 데 초점을 맞춘다는 것을 의미합니다.
그리고 이 CRM 모델의 효과는 실제 사용자를 대상으로 한 A/B 테스트를 통해 입증되었습니다. 4억 명이 넘는 쿠아이쇼우 사용자를 대상으로 진행된 테스트에서 CRM은 기존 모델 대비 뚜렷한 성능 향상을 보였습니다.
CRM의 성공적인 도입은 단순한 기술적 발전을 넘어, 대규모 사용자를 보유한 플랫폼에서 실제로 AI 추천 시스템이 어떻게 효과적으로 작동할 수 있는지 를 보여주는 중요한 사례입니다. 쿠아이쇼우의 성공은 앞으로 더욱 정교하고 사용자 중심적인 AI 추천 시스템 개발에 대한 새로운 가능성을 제시합니다. 이러한 발전은 단순히 콘텐츠 소비 경험을 개선하는 것을 넘어, 플랫폼의 지속적인 성장과 사용자 만족도 향상에도 크게 기여할 것입니다.
Reference
[arxiv] CRM: Retrieval Model with Controllable Condition
Published: (Updated: )
Author: Chi Liu, Jiangxia Cao, Rui Huang, Kuo Cai, Weifeng Ding, Qiang Luo, Kun Gai, Guorui Zhou
http://arxiv.org/abs/2412.13844v1