๐Ÿšจ AI ๋ชจ๋ธ์˜ ๋ฐ์ดํ„ฐ ํ”„๋ผ์ด๋ฒ„์‹œ, ์ด์ œ gMINT๊ฐ€ ์ง€ํ‚จ๋‹ค! ๐Ÿšจ


๋ณธ ๊ธฐ์‚ฌ๋Š” Gonzalo Mancera ๋“ฑ ์—ฐ๊ตฌ์ง„์ด ๊ฐœ๋ฐœํ•œ gMINT(Gradient-based Membership Inference Test)์— ๋Œ€ํ•ด ์†Œ๊ฐœํ•ฉ๋‹ˆ๋‹ค. gMINT๋Š” ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ(LLM)์˜ ๋ฐ์ดํ„ฐ ํ”„๋ผ์ด๋ฒ„์‹œ ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•œ ์ƒˆ๋กœ์šด ๋ฐฉ๋ฒ•๋ก ์œผ๋กœ, ๋†’์€ ์ •ํ™•๋„๋ฅผ ํ†ตํ•ด AI ๋ชจ๋ธ์˜ ํˆฌ๋ช…์„ฑ๊ณผ ๋ฐ์ดํ„ฐ ๋ณดํ˜ธ์— ๊ธฐ์—ฌํ•  ๊ฒƒ์œผ๋กœ ๊ธฐ๋Œ€๋ฉ๋‹ˆ๋‹ค.

related iamge

AI ๋ชจ๋ธ์˜ ์–ด๋‘์šด ๊ทธ๋ฆผ์ž: ๋ฐ์ดํ„ฐ ํ”„๋ผ์ด๋ฒ„์‹œ ์œ„ํ˜‘

์ตœ๊ทผ ๊ธ‰์†๋„๋กœ ๋ฐœ์ „ํ•˜๋Š” ์ธ๊ณต์ง€๋Šฅ(AI), ํŠนํžˆ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ(LLM)์€ ์šฐ๋ฆฌ ์ƒํ™œ ๊ณณ๊ณณ์— ๊นŠ์ˆ™์ด ์Šค๋ฉฐ๋“ค๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ํ•˜์ง€๋งŒ ์ด ํŽธ๋ฆฌํ•จ ๋’ค์—๋Š” ๋ฐ์ดํ„ฐ ํ”„๋ผ์ด๋ฒ„์‹œ๋ผ๋Š” ์–ด๋‘์šด ๊ทธ๋ฆผ์ž๊ฐ€ ๋„์‚ฌ๋ฆฌ๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ๊ณผ์—ฐ AI ๋ชจ๋ธ์ด ํ•™์Šต์— ์‚ฌ์šฉ๋œ ๋ฐ์ดํ„ฐ๋ฅผ ์•ˆ์ „ํ•˜๊ฒŒ ๋ณดํ˜ธํ•˜๊ณ  ์žˆ์„๊นŒ์š”?

๋น›์„ ํ–ฅํ•œ ๋ฐœ๊ฑธ์Œ: gMINT์˜ ๋“ฑ์žฅ

Gonzalo Mancera ๋“ฑ ์—ฐ๊ตฌ์ง„์ด ๊ฐœ๋ฐœํ•œ gMINT(Gradient-based Membership Inference Test) ๋Š” ์ด๋Ÿฌํ•œ ์šฐ๋ ค์— ๋Œ€ํ•œ ๋‹ต์„ ์ œ์‹œํ•ฉ๋‹ˆ๋‹ค. gMINT๋Š” ๊ธฐ์กด์˜ ๋ฉค๋ฒ„์‹ญ ์ถ”๋ก  ํ…Œ์ŠคํŠธ(MINT)๋ฅผ ๊ฐœ์„ ํ•˜์—ฌ LLM ๊ธฐ๋ฐ˜ ํ…์ŠคํŠธ ๋ถ„๋ฅ˜์— ํŠนํ™”๋œ ์ƒˆ๋กœ์šด ๋ฐฉ๋ฒ•๋ก ์ž…๋‹ˆ๋‹ค. ๊ฒฝ์‚ฌ ๊ธฐ๋ฐ˜ ๋ถ„์„์„ ํ†ตํ•ด ํŠน์ • ๋ฐ์ดํ„ฐ๊ฐ€ AI ๋ชจ๋ธ ํ•™์Šต์— ์‚ฌ์šฉ๋˜์—ˆ๋Š”์ง€ ์—ฌ๋ถ€๋ฅผ ์ •ํ™•ํ•˜๊ฒŒ ์‹๋ณ„ํ•ด ๋ƒ…๋‹ˆ๋‹ค.

๋†€๋ผ์šด ์ •ํ™•๋„: ์‹คํ—˜ ๊ฒฐ๊ณผ ๊ณต๊ฐœ

์—ฐ๊ตฌ์ง„์€ 7๊ฐ€์ง€ Transformer ๊ธฐ๋ฐ˜ ๋ชจ๋ธ๊ณผ 250๋งŒ ๊ฐœ๊ฐ€ ๋„˜๋Š” ๋ฌธ์žฅ์œผ๋กœ ๊ตฌ์„ฑ๋œ 6๊ฐœ์˜ ๋ฐ์ดํ„ฐ์…‹์„ ์‚ฌ์šฉํ•˜์—ฌ gMINT์˜ ์„ฑ๋Šฅ์„ ํ‰๊ฐ€ํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ทธ ๊ฒฐ๊ณผ๋Š” ๋†€๋ผ์› ์Šต๋‹ˆ๋‹ค! gMINT๋Š” **AUC(Area Under the Curve) ์ ์ˆ˜ 85%~99%**๋ผ๋Š” ๋†’์€ ์ •ํ™•๋„๋ฅผ ๊ธฐ๋กํ–ˆ์Šต๋‹ˆ๋‹ค. ๋ฐ์ดํ„ฐ ํฌ๊ธฐ์™€ ๋ชจ๋ธ ์•„ํ‚คํ…์ฒ˜์— ๋”ฐ๋ผ ์„ฑ๋Šฅ ์ฐจ์ด๋Š” ์žˆ์—ˆ์ง€๋งŒ, ๋Œ€๋ถ€๋ถ„์˜ ๊ฒฝ์šฐ ๋งค์šฐ ๋†’์€ ์ •ํ™•๋„๋ฅผ ๋ณด์ด๋ฉฐ ๋ฐ์ดํ„ฐ ํ”„๋ผ์ด๋ฒ„์‹œ ๋ณดํ˜ธ์— ๋Œ€ํ•œ ๊ธฐ๋Œ€๊ฐ์„ ๋†’์˜€์Šต๋‹ˆ๋‹ค.

๋ฏธ๋ž˜๋ฅผ ์œ„ํ•œ ์•ฝ์†: AI ์œค๋ฆฌ์˜ ์ƒˆ๋กœ์šด ์ง€ํ‰

gMINT๋Š” ๋‹จ์ˆœํ•œ ๊ธฐ์ˆ ์  ๋ฐœ์ „์„ ๋„˜์–ด, AI ์œค๋ฆฌ์˜ ์ƒˆ๋กœ์šด ์ง€ํ‰์„ ์—ฌ๋Š” ์ค‘์š”ํ•œ ์ด์ •ํ‘œ์ž…๋‹ˆ๋‹ค. AI ๋ชจ๋ธ์˜ ํˆฌ๋ช…์„ฑ์„ ํ™•๋ณดํ•˜๊ณ , ๋ฏผ๊ฐํ•œ ๋ฐ์ดํ„ฐ๋ฅผ ์•ˆ์ „ํ•˜๊ฒŒ ๋ณดํ˜ธํ•˜๋Š” ๋ฐ ํฐ ๊ธฐ์—ฌ๋ฅผ ํ•  ๊ฒƒ์œผ๋กœ ๊ธฐ๋Œ€๋ฉ๋‹ˆ๋‹ค. ์ด๋Š” AI ๊ธฐ์ˆ ์˜ ์ฑ…์ž„ ์žˆ๋Š” ๋ฐœ์ „๊ณผ ์œค๋ฆฌ์ ์ธ ์‚ฌ์šฉ์— ๋Œ€ํ•œ ์ค‘์š”ํ•œ ๋ฉ”์‹œ์ง€๋ฅผ ๋˜์ ธ์ค๋‹ˆ๋‹ค. ์•ž์œผ๋กœ gMINT์™€ ๊ฐ™์€ ๊ธฐ์ˆ ๋“ค์ด AI ์‹œ๋Œ€์˜ ์œค๋ฆฌ์ ์ธ ๋ฐœ์ „์„ ๊ฒฌ์ธํ•˜๋Š” ๋ฐ ์ค‘์š”ํ•œ ์—ญํ• ์„ ํ•  ๊ฒƒ์œผ๋กœ ์˜ˆ์ƒ๋ฉ๋‹ˆ๋‹ค. AI ๊ธฐ์ˆ ์˜ ๋ฐœ์ „๊ณผ ํ•จ๊ป˜ ๋ฐ์ดํ„ฐ ํ”„๋ผ์ด๋ฒ„์‹œ์— ๋Œ€ํ•œ ์ฑ…์ž„๊ฐ ์žˆ๋Š” ์ ‘๊ทผ์ด ๋”์šฑ ์ค‘์š”ํ•ด์ง€๋Š” ์‹œ๋Œ€์ž…๋‹ˆ๋‹ค.


*์ด ๊ธฐ์‚ฌ๋Š” AI๊ฐ€ ์ƒ์„ฑํ•œ ๋‚ด์šฉ์œผ๋กœ, ์ผ๋ถ€ ์ •๋ณด๊ฐ€ ์‹ค์ œ์™€ ๋‹ค๋ฅผ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ •ํ™•ํ•œ ํ™•์ธ์„ ์œ„ํ•ด ์ถ”๊ฐ€์ ์ธ ๊ฒ€์ฆ์„ ๊ถŒ์žฅ๋“œ๋ฆฝ๋‹ˆ๋‹ค.

Reference

[arxiv] Is My Text in Your AI Model? Gradient-based Membership Inference Test applied to LLMs

Published: ย (Updated: )

Author: Gonzalo Mancera, Daniel DeAlcala, Julian Fierrez, Ruben Tolosana, Aythami Morales

http://arxiv.org/abs/2503.07384v2