멀티링구얼 사이버 위협 탐지의 혁신: Bi-LSTM 모델의 약진
본 연구는 다국어 트윗 데이터를 활용한 사이버 위협 탐지 시스템 개발에 관한 것으로, 다양한 기계 학습 및 심층 학습 모델을 비교 분석한 결과 Bi-LSTM 모델이 가장 우수한 성능을 보였음을 밝혔습니다. GitHub를 통한 오픈소스 코드 공개를 통해 연구 결과의 재현성과 투명성을 확보하였습니다.

최근 트위터(현 X)와 같은 소셜 미디어 플랫폼에서 가짜 정보와 유해 콘텐츠의 확산으로 인해 사이버 위협 탐지의 중요성이 그 어느 때보다 커지고 있습니다. 특히, 다양한 언어로 작성된 트윗 속에 숨겨진 사이버 위협은 개인, 공동체, 국가에 심각한 위험을 초래합니다. 기존 연구는 특정 언어, 도메인 또는 지역에 국한되거나 단일 모델에 의존하는 경우가 많아 실제 세계의 다양한 시나리오에는 적용하기 어려운 한계를 지녔습니다.
Saydul Akbar Murad, Ashim Dahal, Nick Rahimi 세 연구자는 이러한 한계를 극복하기 위해 다양한 첨단 모델을 사용한 다국어 트윗 사이버 위협 탐지 연구를 진행했습니다. 연구는 크게 세 단계로 진행되었습니다.
(1) 다국어 데이터셋 구축: 영어, 중국어, 러시아어, 아랍어 트윗 데이터셋을 수집하고, 수동 및 극성 기반 라벨링 기법을 통해 고품질의 주석을 달았습니다. 다양한 언어의 데이터를 확보하여 모델의 일반화 능력을 높이고 실제 환경에 대한 적용성을 강화한 점이 특징입니다.
(2) 단일 언어 모델 평가: 각 데이터셋을 개별적으로 분석하여 기계 학습(ML)과 심층 학습(DL) 모델의 성능을 언어별로 평가했습니다. 이를 통해 각 모델의 언어별 특성과 강점을 파악하고, 다국어 환경에서의 적용 가능성을 탐색했습니다. Random Forest(RF) 모델이 기계 학습 모델 중 가장 높은 성능을 보였습니다.
(3) 다국어 모델 평가: 네 개의 데이터셋을 하나로 통합하여 다국어 데이터셋을 구성하고, DL 및 대규모 언어 모델(LLM) 아키텍처를 적용하여 다양한 언어에서 사이버 위협을 식별하는 효율성을 평가했습니다. 결과적으로, Bi-LSTM 아키텍처가 모든 데이터셋에서 다른 DL 및 LLM 아키텍처를 능가하는 성능을 보였습니다.
이 연구는 Bi-LSTM 모델이 다국어 사이버 위협 탐지에 매우 효과적임을 보여줍니다. 더욱이, 연구팀은 GitHub (https://github.com/Mmurrad/Tweet-Data-Classification.git)에 코드를 공개하여 연구 결과의 투명성과 재현성을 확보했습니다. 이는 다른 연구자들의 검증과 후속 연구를 촉진하는 중요한 부분입니다. 이 연구는 다국어 사이버 위협 탐지 분야의 발전에 크게 기여할 것으로 기대됩니다. 앞으로 더욱 정교한 모델 개발과 실제 환경 적용을 통해 더욱 안전한 디지털 환경 구축에 도움이 될 것으로 전망됩니다.
Reference
[arxiv] Multi-Lingual Cyber Threat Detection in Tweets/X Using ML, DL, and LLM: A Comparative Analysis
Published: (Updated: )
Author: Saydul Akbar Murad, Ashim Dahal, Nick Rahimi
http://arxiv.org/abs/2502.04346v1