🚨 LLM 기반 닀쀑 μ—μ΄μ „νŠΈ μ‹œμŠ€ν…œμ˜ 치λͺ…적 취약점 곡개: μ „μ—Όμ„± μˆœν™˜ 차단 곡격 (Corba) 🚨


λ³Έ κΈ°μ‚¬λŠ” LLM 기반 닀쀑 μ—μ΄μ „νŠΈ μ‹œμŠ€ν…œ(LLM-MAS)의 λ³΄μ•ˆ 취약성을 λ°νžˆλŠ” μ΅œμ‹  연ꡬ κ²°κ³Όλ₯Ό λ‹€λ£Ήλ‹ˆλ‹€. 'μ „μ—Όμ„± μˆœν™˜ 차단 곡격(Corba)'μ΄λΌλŠ” μƒˆλ‘œμš΄ 곡격 기법이 μ†Œκ°œλ˜μ—ˆμœΌλ©°, μ‹€μ œ μ‹œμŠ€ν…œμ„ λŒ€μƒμœΌλ‘œ ν•œ μ‹€ν—˜ κ²°κ³Όκ°€ μ œμ‹œλ©λ‹ˆλ‹€. 이 μ—°κ΅¬λŠ” AI μ‹œμŠ€ν…œμ˜ λ³΄μ•ˆ 강화에 λŒ€ν•œ μ€‘μš”μ„±μ„ κ°•μ‘°ν•˜λ©°, ν–₯ν›„ 연ꡬ λ°©ν–₯에 λŒ€ν•œ μ‹œμ‚¬μ μ„ μ œκ³΅ν•©λ‹ˆλ‹€.

related iamge

첨단 AI μ‹œμŠ€ν…œμ˜ μ–΄λ‘μš΄ 그림자: μ „μ—Όμ„± μˆœν™˜ 차단 곡격 (Corba)

졜근, μ£Όμ €μž Zhenhong Zhouλ₯Ό ν¬ν•¨ν•œ 7λͺ…μ˜ 연ꡬ진이 λ°œν‘œν•œ 논문은 인곡지λŠ₯ 뢄야에 좩격을 μ•ˆκ²¨μ£Όμ—ˆμŠ΅λ‹ˆλ‹€. 그듀은 λŒ€κ·œλͺ¨ μ–Έμ–΄ λͺ¨λΈ(LLM) 기반 닀쀑 μ—μ΄μ „νŠΈ μ‹œμŠ€ν…œ(LLM-MAS) 의 μ‹¬κ°ν•œ λ³΄μ•ˆ 취약성을 밝히고, 이λ₯Ό μ•…μš©ν•˜λŠ” μƒˆλ‘œμš΄ 곡격 기법인 **'μ „μ—Όμ„± μˆœν™˜ 차단 곡격(Corba)'**을 μ†Œκ°œν–ˆμŠ΅λ‹ˆλ‹€.

LLM-MASλŠ” λ³΅μž‘ν•œ μž‘μ—…μ„ 효율적으둜 μˆ˜ν–‰ν•˜κΈ° μœ„ν•΄ μ„€κ³„λœ 첨단 μ‹œμŠ€ν…œμž…λ‹ˆλ‹€. ν•˜μ§€λ§Œ, 연ꡬ진은 이 μ‹œμŠ€ν…œμ΄ 'κ²‰λ³΄κΈ°μ—λŠ” λ¬΄ν•΄ν•œ' λͺ…λ Ήμ–΄λ₯Ό 톡해 곡격받을 수 μžˆλ‹€λŠ” 사싀을 λ°ν˜€λƒˆμŠ΅λ‹ˆλ‹€. CorbaλŠ” 마치 λ°”μ΄λŸ¬μŠ€μ²˜λŸΌ λ„€νŠΈμ›Œν¬λ₯Ό 톡해 μ „νŒŒλ˜λ©°, μ‹œμŠ€ν…œμ˜ 계산 μžμ›μ„ κ³ κ°ˆμ‹œμΌœ λ§ˆλΉ„μ‹œν‚€λŠ” κ°•λ ₯ν•œ κ³΅κ²©μž…λ‹ˆλ‹€. 기쑴의 μ•ˆμ „ λ©”μ»€λ‹ˆμ¦˜μœΌλ‘œλŠ” μ΄λŸ¬ν•œ 곡격을 막을 수 μ—†λ‹€λŠ” 점이 큰 λ¬Έμ œμž…λ‹ˆλ‹€.

연ꡬ진은 AutoGenκ³Ό Camelμ΄λΌλŠ” 두 κ°€μ§€ 널리 μ‚¬μš©λ˜λŠ” LLM-MAS μ‹œμŠ€ν…œμ„ λŒ€μƒμœΌλ‘œ μ‹€ν—˜μ„ μ§„ν–‰ν–ˆμŠ΅λ‹ˆλ‹€. κ·Έ κ²°κ³Ό, λ‹€μ–‘ν•œ λ„€νŠΈμ›Œν¬ ꡬ쑰와 μƒμš© λͺ¨λΈ, 심지어 μ˜€ν”ˆμ†ŒμŠ€ λͺ¨λΈμ—μ„œλ„ Corbaκ°€ 효과적으둜 μž‘λ™ν•˜λŠ” 것을 ν™•μΈν–ˆμŠ΅λ‹ˆλ‹€. λ”μš± λ†€λΌμš΄ 것은, 이 곡격 μ½”λ“œκ°€ GitHub (https://github.com/zhrli324/Corba) 에 κ³΅κ°œλ˜μ—ˆλ‹€λŠ” μ μž…λ‹ˆλ‹€. μ΄λŠ” 연ꡬ진이 AI μ‹œμŠ€ν…œμ˜ λ³΄μ•ˆ κ°•ν™”λ₯Ό μœ„ν•œ μ΄‰κ΅¬μ˜ λ©”μ‹œμ§€λ₯Ό μ „λ‹¬ν•˜λŠ” λ™μ‹œμ—, 잠재적인 μœ„ν˜‘μ— λŒ€ν•œ 경각심을 μΌκΉ¨μ›Œμ£ΌλŠ” ν–‰λ³΄μž…λ‹ˆλ‹€.

Corba의 νŠΉμ§•:

  • μ „μ—Όμ„±: λ„€νŠΈμ›Œν¬ ν† ν΄λ‘œμ§€μ— 관계없이 μ „νŒŒ
  • μˆœν™˜μ„±: 지속적인 μžμ› 고갈 유발
  • 은밀성: λ¬΄ν•΄ν•œ λͺ…λ Ήμ–΄λ‘œ μœ„μž₯

이번 μ—°κ΅¬λŠ” LLM-MAS의 λ³΄μ•ˆμ— λŒ€ν•œ μ‹¬κ°ν•œ 우렀λ₯Ό μ œκΈ°ν•©λ‹ˆλ‹€. 첨단 기술의 λ°œμ „κ³Ό λ”λΆˆμ–΄, 이에 λŒ€ν•œ μ•ˆμ „ 및 λ³΄μ•ˆ 연ꡬ λ˜ν•œ ν•„μˆ˜μ μž„μ„ λ³΄μ—¬μ£ΌλŠ” μ‚¬λ‘€μž…λ‹ˆλ‹€. μ—°κ΅¬μ§„μ˜ 곡개된 μ½”λ“œλŠ” AI μ‹œμŠ€ν…œμ˜ λ³΄μ•ˆ κ°•ν™”λ₯Ό μœ„ν•œ μ€‘μš”ν•œ μžλ£Œκ°€ 될 것이며, 미래의 AI λ³΄μ•ˆ 연ꡬ에 μ€‘μš”ν•œ μ΄μ •ν‘œλ₯Ό μ œμ‹œν•  κ²ƒμž…λ‹ˆλ‹€. ν•˜μ§€λ§Œ, λ™μ‹œμ— Corba의 μ•…μš© κ°€λŠ₯μ„± λ˜ν•œ μš°λ €λ˜λŠ” λΆ€λΆ„μž…λ‹ˆλ‹€. μ±…μž„κ° μžˆλŠ” 연ꡬ와 윀리적인 μ‚¬μš©μ— λŒ€ν•œ 고민이 ν•„μš”ν•œ μ‹œμ μž…λ‹ˆλ‹€.


*이 κΈ°μ‚¬λŠ” AIκ°€ μƒμ„±ν•œ λ‚΄μš©μœΌλ‘œ, 일뢀 정보가 μ‹€μ œμ™€ λ‹€λ₯Ό 수 μžˆμŠ΅λ‹ˆλ‹€. μ •ν™•ν•œ 확인을 μœ„ν•΄ 좔가적인 검증을 ꢌμž₯λ“œλ¦½λ‹ˆλ‹€.

Reference

[arxiv] CORBA: Contagious Recursive Blocking Attacks on Multi-Agent Systems Based on Large Language Models

Published: Β (Updated: )

Author: Zhenhong Zhou, Zherui Li, Jie Zhang, Yuanhe Zhang, Kun Wang, Yang Liu, Qing Guo

http://arxiv.org/abs/2502.14529v1