CleanMAP: 신뢰도 기반 크라우드소싱 HD 지도 업데이트를 위한 다중 모달 LLM 증류 프레임워크


Tsinghua University와 Beihang University 공동 연구팀이 개발한 CleanMAP은 다중 모달 대규모 언어 모델(MLLM)을 활용하여 크라우드소싱 HD 지도 업데이트의 정확도와 신뢰도를 향상시키는 혁신적인 시스템입니다. 실험 결과, 기존 방식보다 뛰어난 정확도와 인간 평가자와의 높은 일치율을 보여주었으며, 자율주행 기술 발전에 중요한 기여를 할 것으로 기대됩니다.

related iamge

끊임없이 진화하는 자율주행 기술의 핵심: 정확한 HD 지도

자율주행 자동차의 눈과 같이 중요한 HD 지도. 끊임없이 변화하는 도로 환경을 실시간으로 반영하기 위해서는 정확하고 신뢰할 수 있는 지도 업데이트가 필수적입니다. 최근 Ankit Kumar Shaw 등이 이끄는 Tsinghua University와 Beihang University 공동 연구팀은 크라우드소싱 데이터를 활용하여 이러한 문제를 해결하는 획기적인 솔루션, CleanMAP을 개발했습니다.

CleanMAP: 다중 모달 LLM의 힘을 빌린 지능형 지도 업데이트 시스템

CleanMAP은 다중 모달 대규모 언어 모델(MLLM) 기반 증류 프레임워크를 활용합니다. 크라우드소싱 데이터는 모션 블러, 조명 변화, 악천후, 차선 표시 퇴색 등 다양한 요인으로 인해 불일치 및 오류가 발생할 수 있습니다. CleanMAP은 이러한 문제점을 해결하기 위해 다음과 같은 혁신적인 기능을 제공합니다.

  • 차선 가시성 점수 모델: MLLM 기반의 차선 가시성 점수 모델은 시각적 매개변수를 정량적으로 평가하고 차선 검출에 미치는 영향에 따라 0~10의 신뢰도 점수를 부여합니다.
  • 동적 구간별 신뢰도 점수 함수: 차선 가시성에 따라 점수를 동적으로 조정하여 인간 평가와의 일관성을 높이고 부정확한 데이터를 효과적으로 제거합니다.
  • 신뢰도 기반 지역 지도 융합 전략: 최상위 신뢰도 점수를 기준으로 상위 k개의 지역 지도를 선택적으로 융합하여 데이터 품질과 양 사이의 최적의 균형을 유지합니다. (최고 점수 - 10% 범위)

놀라운 결과: 정확도 향상과 신뢰도 확보

실제 자율 주행 차량 데이터셋을 사용한 실험 결과는 CleanMAP의 뛰어난 성능을 보여줍니다. 상위 3개의 지역 지도를 융합했을 때 평균 지도 업데이트 오차가 0.28m로, 기존 방식(0.37m)보다 훨씬 낮았으며, 엄격한 정확도 기준(<= 0.32m)도 충족했습니다. 또한, 실제 차량 데이터를 사용한 검증 결과 인간 평가자와 84.88%의 일치율을 보여 모델의 강력한 견고성과 신뢰성을 입증했습니다.

미래를 향한 발걸음: 더욱 안전하고 스마트한 자율주행 시대

CleanMAP은 크라우드소싱 HD 지도 업데이트를 위한 확장 가능하고 실제 배포 가능한 솔루션을 제공하여 더욱 정확하고 안정적인 자율주행을 가능하게 합니다. 프로젝트 코드에서 자세한 내용을 확인할 수 있습니다. CleanMAP의 등장은 자율주행 기술의 발전에 중요한 이정표가 될 것으로 기대됩니다. 더 안전하고 스마트한 미래의 자율주행 시대를 향한 혁신적인 한 걸음입니다.


*이 기사는 AI가 생성한 내용으로, 일부 정보가 실제와 다를 수 있습니다. 정확한 확인을 위해 추가적인 검증을 권장드립니다.

Reference

[arxiv] CleanMAP: Distilling Multimodal LLMs for Confidence-Driven Crowdsourced HD Map Updates

Published:  (Updated: )

Author: Ankit Kumar Shaw, Kun Jiang, Tuopu Wen, Chandan Kumar Sah, Yining Shi, Mengmeng Yang, Diange Yang, Xiaoli Lian

http://arxiv.org/abs/2504.10738v1