๐ŸšจLLM ์—์ด์ „ํŠธ์˜ ์น˜๋ช…์  ์•ฝ์ : ๋ฉ”๋ชจ๋ฆฌ ์œ ์ถœ ์œ„ํ—˜ ๊ณต๊ฐœ!


๋ณธ ๊ธฐ์‚ฌ๋Š” Bo Wang ๋“ฑ ์—ฐ๊ตฌ์ง„์˜ ๋…ผ๋ฌธ "Unveiling Privacy Risks in LLM Agent Memory"๋ฅผ ๋ฐ”ํƒ•์œผ๋กœ LLM ์—์ด์ „ํŠธ์˜ ๋ฉ”๋ชจ๋ฆฌ ์ทจ์•ฝ์„ฑ๊ณผ MEXTRA ๊ณต๊ฒฉ ๊ธฐ๋ฒ•์— ๋Œ€ํ•ด ์‹ฌ์ธต์ ์œผ๋กœ ๋ถ„์„ํ•ฉ๋‹ˆ๋‹ค. ์—ฐ๊ตฌ ๊ฒฐ๊ณผ๋Š” LLM ์—์ด์ „ํŠธ์˜ ๋ฉ”๋ชจ๋ฆฌ ๋ณดํ˜ธ ๊ฐ•ํ™”์˜ ์‹œ๊ธ‰์„ฑ์„ ๊ฐ•์กฐํ•˜๋ฉฐ, AI ์‹œ๋Œ€์˜ ์œค๋ฆฌ์  ์ฑ…์ž„๊ณผ ํ”„๋ผ์ด๋ฒ„์‹œ ๋ณดํ˜ธ์— ๋Œ€ํ•œ ์ค‘์š”ํ•œ ์‹œ์‚ฌ์ ์„ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค.

related iamge

๐Ÿ’ฅ AI ์‹œ๋Œ€์˜ ๊ทธ๋ฆผ์ž: LLM ์—์ด์ „ํŠธ์˜ ๋ฉ”๋ชจ๋ฆฌ ์ทจ์•ฝ์„ฑ

์ตœ๊ทผ ๊ธ‰์ฆํ•˜๋Š” LLM(๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ) ์—์ด์ „ํŠธ๋Š” ๋‹ค์–‘ํ•œ ๋ถ„์•ผ์—์„œ ํ™œ์•ฝํ•˜๋ฉฐ ์˜์‚ฌ๊ฒฐ์ • ๊ณผ์ •์„ ํ–ฅ์ƒ์‹œํ‚ค๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ํ•˜์ง€๋งŒ ์ด๋Ÿฌํ•œ ํŽธ๋ฆฌํ•จ ๋’ค์—๋Š” ์‹ฌ๊ฐํ•œ ์œ„ํ—˜์ด ๋„์‚ฌ๋ฆฌ๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ๋ฐ”๋กœ ๊ฐœ์ธ ์ •๋ณด ์œ ์ถœ์ž…๋‹ˆ๋‹ค.

Bo Wang ๋“ฑ ์—ฐ๊ตฌ์ง„์ด ๋ฐœํ‘œํ•œ ๋…ผ๋ฌธ "Unveiling Privacy Risks in LLM Agent Memory"๋Š” LLM ์—์ด์ „ํŠธ์˜ ๋ฉ”๋ชจ๋ฆฌ ๋ชจ๋“ˆ์— ์ €์žฅ๋œ ๋ฏผ๊ฐํ•œ ์‚ฌ์šฉ์ž-์—์ด์ „ํŠธ ์ƒํ˜ธ์ž‘์šฉ ์ •๋ณด๊ฐ€ ์ƒˆ๋กœ์šด ํ”„๋ผ์ด๋ฒ„์‹œ ์œ„ํ˜‘์œผ๋กœ ์ž‘์šฉํ•œ๋‹ค๋Š” ์‚ฌ์‹ค์„ ๋ฐํ˜”์Šต๋‹ˆ๋‹ค. ์—ฐ๊ตฌ์ง„์€ ์ด๋Ÿฌํ•œ ์œ„ํ—˜์„ ์ฒด๊ณ„์ ์œผ๋กœ ๋ถ„์„ํ•˜๊ธฐ ์œ„ํ•ด MEXTRA(Memory EXTRaction Attack) ๋ผ๋Š” ์ƒˆ๋กœ์šด ๊ณต๊ฒฉ ๊ธฐ๋ฒ•์„ ์ œ์•ˆํ–ˆ์Šต๋‹ˆ๋‹ค.

๐Ÿ”ฌ MEXTRA: ๋ธ”๋ž™๋ฐ•์Šค ์† ๊ฐœ์ธ์ •๋ณด ํƒˆ์ทจ

MEXTRA๋Š” ๋ธ”๋ž™๋ฐ•์Šค ํ™˜๊ฒฝ, ์ฆ‰ LLM ์—์ด์ „ํŠธ์˜ ๋‚ด๋ถ€ ๊ตฌ์กฐ๋ฅผ ์•Œ ์ˆ˜ ์—†๋Š” ์ƒํ™ฉ์—์„œ๋„ ๋ฉ”๋ชจ๋ฆฌ์— ์ €์žฅ๋œ ๊ฐœ์ธ ์ •๋ณด๋ฅผ ์ถ”์ถœํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์—ฐ๊ตฌ์ง„์€ ํšจ๊ณผ์ ์ธ ๊ณต๊ฒฉ ํ”„๋กฌํ”„ํŠธ ๋””์ž์ธ๊ณผ ์ž๋™ ํ”„๋กฌํ”„ํŠธ ์ƒ์„ฑ ๋ฐฉ๋ฒ•์„ ๊ฐœ๋ฐœํ•˜์—ฌ LLM ์—์ด์ „ํŠธ์˜ ์ง€์‹ ์ˆ˜์ค€์— ๋”ฐ๋ผ ๊ณต๊ฒฉ์„ ์ตœ์ ํ™”ํ–ˆ์Šต๋‹ˆ๋‹ค.

๋‘ ๊ฐ€์ง€ ๋Œ€ํ‘œ์ ์ธ LLM ์—์ด์ „ํŠธ๋ฅผ ๋Œ€์ƒ์œผ๋กœ ์‹คํ—˜ํ•œ ๊ฒฐ๊ณผ, MEXTRA์˜ ํšจ๊ณผ๊ฐ€ ์ž…์ฆ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ๋” ๋‚˜์•„๊ฐ€, ์—ฐ๊ตฌ์ง„์€ ์—์ด์ „ํŠธ์™€ ๊ณต๊ฒฉ์ž ๊ด€์  ๋ชจ๋‘์—์„œ ๋ฉ”๋ชจ๋ฆฌ ์œ ์ถœ์— ์˜ํ–ฅ์„ ๋ฏธ์น˜๋Š” ์ฃผ์š” ์š”์ธ๋“ค์„ ๋ถ„์„ํ–ˆ์Šต๋‹ˆ๋‹ค.

๐Ÿ›ก๏ธ ์ ˆ์‹คํ•œ ๋ณด์•ˆ ๊ฐ•ํ™”: ๋ฏธ๋ž˜๋ฅผ ์œ„ํ•œ ๊ฒฝ๊ณ 

์ด ์—ฐ๊ตฌ๋Š” LLM ์—์ด์ „ํŠธ์˜ ๋ฉ”๋ชจ๋ฆฌ ๋ณดํ˜ธ์˜ ์ค‘์š”์„ฑ์„ ๊ฐ•๋ ฅํ•˜๊ฒŒ ์‹œ์‚ฌํ•ฉ๋‹ˆ๋‹ค. ๊ฐœ์ธ ์ •๋ณด ๋ณดํ˜ธ๋ฅผ ์œ„ํ•ด์„œ๋Š” ์—์ด์ „ํŠธ ์„ค๊ณ„ ๋‹จ๊ณ„๋ถ€ํ„ฐ ํšจ๊ณผ์ ์ธ ๋ฉ”๋ชจ๋ฆฌ ๋ณดํ˜ธ ์žฅ์น˜๋ฅผ ๊ตฌ์ถ•ํ•˜๊ณ , ๋ฐฐํฌ ์‹œ์—๋„ ์ง€์†์ ์ธ ๋ณด์•ˆ ๋ชจ๋‹ˆํ„ฐ๋ง์ด ํ•„์ˆ˜์ ์ž…๋‹ˆ๋‹ค. MEXTRA์™€ ๊ฐ™์€ ๊ณต๊ฒฉ ๊ธฐ๋ฒ•์˜ ์กด์žฌ๋Š” LLM ์—์ด์ „ํŠธ์˜ ๋ณด์•ˆ์— ๋Œ€ํ•œ ์šฐ๋ฆฌ์˜ ์ธ์‹์„ ์ƒˆ๋กญ๊ฒŒ ํ•˜๊ณ , ๋”์šฑ ๊ฐ•๋ ฅํ•œ ๋ณด์•ˆ ์ฒด๊ณ„ ๊ตฌ์ถ•์˜ ํ•„์š”์„ฑ์„ ์ ˆ์‹คํ•˜๊ฒŒ ๋А๋ผ๊ฒŒ ํ•ฉ๋‹ˆ๋‹ค.

์—ฐ๊ตฌ์ง„์˜ ๋ฐœ๊ฒฌ์€ ๋‹จ์ˆœํ•œ ๊ธฐ์ˆ ์  ๋ฌธ์ œ๋ฅผ ๋„˜์–ด, AI ์‹œ๋Œ€์˜ ์œค๋ฆฌ์  ์ฑ…์ž„๊ณผ ํ”„๋ผ์ด๋ฒ„์‹œ ๋ณดํ˜ธ์— ๋Œ€ํ•œ ์‹ฌ๊ฐํ•œ ๊ณ ๋ฏผ์„ ๋ถˆ๋Ÿฌ์ผ์œผํ‚ต๋‹ˆ๋‹ค. ์•ž์œผ๋กœ LLM ์—์ด์ „ํŠธ ๊ฐœ๋ฐœ์ž์™€ ์‚ฌ์šฉ์ž ๋ชจ๋‘๋Š” ์ด๋Ÿฌํ•œ ์œ„ํ—˜์„ ์ธ์ง€ํ•˜๊ณ , ์•ˆ์ „ํ•˜๊ณ  ์ฑ…์ž„๊ฐ ์žˆ๋Š” AI ์‹œ์Šคํ…œ ๊ตฌ์ถ•์„ ์œ„ํ•ด ๋…ธ๋ ฅํ•ด์•ผ ํ•  ๊ฒƒ์ž…๋‹ˆ๋‹ค.


*์ด ๊ธฐ์‚ฌ๋Š” AI๊ฐ€ ์ƒ์„ฑํ•œ ๋‚ด์šฉ์œผ๋กœ, ์ผ๋ถ€ ์ •๋ณด๊ฐ€ ์‹ค์ œ์™€ ๋‹ค๋ฅผ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ •ํ™•ํ•œ ํ™•์ธ์„ ์œ„ํ•ด ์ถ”๊ฐ€์ ์ธ ๊ฒ€์ฆ์„ ๊ถŒ์žฅ๋“œ๋ฆฝ๋‹ˆ๋‹ค.

Reference

[arxiv] Unveiling Privacy Risks in LLM Agent Memory

Published: ย (Updated: )

Author: Bo Wang, Weiyi He, Pengfei He, Shenglai Zeng, Zhen Xiang, Yue Xing, Jiliang Tang

http://arxiv.org/abs/2502.13172v1