첨단 AI, 역사의 벽에 부딪히다: 18세기 터키 원고 번역에서 드러난 LLM의 한계
구글 Gemini LLM의 18세기 오스만 터키어 원고 번역 시도에서 안전 메커니즘으로 인한 번역 누락이 발생, LLM의 안전 기능과 정확성 사이의 균형 문제를 제기하며, 역사적 맥락 이해의 중요성과 LLM 기술 발전 및 윤리적 책임의 필요성을 강조하는 연구 결과를 다룹니다.

최근 괄목할 만한 발전을 이룬 대규모 언어 모델(LLM)은 기계 번역 분야에서도 혁신을 가져왔습니다. 구글의 Gemini와 OpenAI의 GPT-4와 같은 모델들은 다양한 언어 번역 작업에서 높은 성능을 보이며, 널리 활용되고 있습니다. 하지만 이러한 첨단 기술에도 불구하고, LLM이 역사적 텍스트 번역에 직면하는 예상치 못한 어려움이 최근 연구를 통해 드러났습니다.
Merve Tekgurler의 연구 논문 "LLMs for Translation: Historical, Low-Resourced Languages and Contemporary AI Models"은 18세기 오스만 터키어 원고인 『Prisoner of the Infidels: The Memoirs of Osman Agha of Timisoara』를 영어로 번역하는 과정에서 Gemini의 성능을 분석했습니다. 이 원고는 오스만 제국 신하였던 Osman Agha가 11년간 오스트리아 포로 생활을 기록한 것으로, 전쟁과 폭력에 대한 생생한 묘사가 담겨 있습니다.
흥미로운 점은 Gemini의 안전 메커니즘이 원고의 14~23%를 유해한 내용으로 감지하여 번역을 중단했다는 것입니다. 이는 LLM의 안전 기능이 잠재적 위험을 효과적으로 완화하는 데 기여하지만, 동시에 역사적 맥락과 뉘앙스가 풍부한 자료의 정확하고 완전한 번역을 방해할 수 있음을 보여줍니다. 즉, 안전을 위해 과도한 제약을 가하는 것이 오히려 정확성을 떨어뜨리는 역효과를 낳을 수 있다는 것입니다.
이 연구는 단순히 기술적 한계를 넘어 중요한 시사점을 제시합니다. 현대 전쟁 피해자들의 증언 번역과 같은 법적 절차나 인도적 문서화 작업에서 정확하고 포괄적인 번역은 매우 중요합니다. LLM이 이러한 중요한 작업에서 오류를 범할 가능성이 있다는 것은 심각한 문제입니다. 따라서 LLM의 안전 메커니즘 개선과 역사적 텍스트 처리에 대한 추가 연구가 절실히 필요합니다.
결론적으로, 이 연구는 LLM의 놀라운 능력과 함께, 그 기술적 한계와 윤리적 고려사항을 동시에 고민해야 함을 강조합니다. 역사적 자료의 정확한 번역은 단순한 기술적 문제를 넘어, 과거를 이해하고 현재와 미래를 위한 교훈을 얻는 데 필수적이기 때문입니다. 앞으로 LLM 기술이 더욱 발전하여 이러한 문제들을 극복할 수 있기를 기대하며, 기술 발전과 함께 윤리적 책임감 또한 중요하게 고려되어야 할 것입니다.
Reference
[arxiv] LLMs for Translation: Historical, Low-Resourced Languages and Contemporary AI Models
Published: (Updated: )
Author: Merve Tekgurler
http://arxiv.org/abs/2503.11898v1