압도적인 속도와 정확성! 자율주행의 미래를 여는 T³Former
본 기사는 Xu Haoran 등 6명의 연구진이 개발한 4D 점유 공간 세계 모델 T³Former에 대한 내용을 다룹니다. T³Former는 기존 모델의 한계를 극복, 압축된 3D 공간 정보와 자기회귀적 예측 방식을 통해 1.44배 빠른 속도(26 FPS)와 향상된 정확도(IoU 36.09, 평균 절대 계획 오차 1.0미터)를 달성했습니다. 이는 실시간 자율주행 기술 발전에 큰 기여를 할 것으로 예상됩니다.

자율주행 기술의 핵심은 바로 주변 환경을 정확하고 빠르게 예측하는 것입니다. 하지만 기존의 세계 모델들은 미세한 상호작용을 포착하고 실시간 예측을 하는 데 어려움을 겪어왔습니다. 이러한 한계를 극복하기 위해 등장한 것이 바로 T³Former (Temporal Triplane Transformers) 입니다.
Xu Haoran 등 6명의 연구진이 개발한 T³Former는 4D 점유 공간 세계 모델로, 자율주행 자동차의 움직임과 주변 환경 변화 간의 미세한 상관관계를 효율적으로 학습합니다. 핵심은 다음과 같습니다.
- 압축된 3차원 공간 정보: T³Former는 먼저 3D 공간의 의미있는 점유 정보를 효율적으로 압축하는 '트리플레인(triplane)' 표현을 미리 학습합니다. 이를 통해 연산량을 줄이고 속도를 높였습니다.
- 다중 스케일 시간적 움직임 특징 추출: 과거 트리플레인에서 다양한 스케일의 시간적 움직임 특징을 추출하여 미래를 예측하는 데 활용합니다.
- 자기회귀적 접근 방식: 자기회귀 방식을 사용하여 이전 트리플레인 변화를 바탕으로 다음 트리플레인 변화를 반복적으로 예측합니다.
- 미래 점유 공간 및 자기 움직임 예측: 예측된 트리플레인 변화를 이전 변화와 결합하여 미래 점유 공간과 자율주행 자동차의 움직임을 예측합니다.
실험 결과는 놀랍습니다. T³Former는 기존 모델보다 1.44배 빠른 26 FPS의 추론 속도를 달성하면서, 평균 IoU(Intersection over Union)는 36.09로 향상시켰고, 평균 절대 계획 오차는 1.0미터로 감소시켰습니다. 이는 속도와 정확성을 동시에 향상시킨 획기적인 결과입니다.
T³Former는 단순히 속도만 빠른 것이 아니라, 정확도까지 높였다는 점에서 자율주행 기술의 새로운 지평을 열었다고 볼 수 있습니다. 이 연구는 실시간 자율주행 시스템 개발에 중요한 이정표를 제시하며, 앞으로 자율주행 기술의 발전에 큰 영향을 미칠 것으로 기대됩니다. 향후 연구에서는 다양한 환경에서의 성능 검증과 더욱 개선된 모델 개발이 중요한 과제가 될 것입니다.
Reference
[arxiv] Temporal Triplane Transformers as Occupancy World Models
Published: (Updated: )
Author: Haoran Xu, Peixi Peng, Guang Tan, Yiqian Chang, Yisen Zhao, Yonghong Tian
http://arxiv.org/abs/2503.07338v1