๐จ ์ํ ์ธ์ด ๋ชจ๋ธ(SLM)์ ์จ๊ฒจ์ง ์ํ: ํ์ฅ ๊ณต๊ฒฉ์ ๋ํ ๊ฒฝ๊ณ ๐จ
๋ณธ ๊ธฐ์ฌ๋ ์ํ ์ธ์ด ๋ชจ๋ธ(SLM)์ ๋ณด์ ์ทจ์ฝ์ฑ์ ๋ํ ์ต์ ์ฐ๊ตฌ ๊ฒฐ๊ณผ๋ฅผ ์๊ฐํฉ๋๋ค. ์ฐ๊ตฌ์ง์ 13๊ฐ์ SLM์ ๋์์ผ๋ก ํ์ฅ ๊ณต๊ฒฉ ์คํ์ ์งํํ์ฌ ๋๋ถ๋ถ์ SLM์ด ์ทจ์ฝํจ์ ๋ฐํ์ผ๋ฉฐ, ํจ๊ณผ์ ์ธ ๋ฐฉ์ด ๊ธฐ๋ฒ๊ณผ SLM ์ค๊ณ ๊ฐ์ ๋ฐฉํฅ์ ์ ์ํ์ต๋๋ค. ์ด ์ฐ๊ตฌ๋ SLM์ ๋ณด์ ์ค์์ฑ์ ๊ฐ์กฐํ๊ณ , ์์ ํ AI ์์คํ ๊ตฌ์ถ์ ํ์์ฑ์ ์ผ๊นจ์์ค๋๋ค.

์ํ ์ธ์ด ๋ชจ๋ธ(SLM)์ ์จ๊ฒจ์ง ์ํ: ํ์ฅ ๊ณต๊ฒฉ์ ๋ํ ๊ฒฝ๊ณ
์ต๊ทผ ๊ฒฝ๋ํ๋ ์ํ ์ธ์ด ๋ชจ๋ธ(SLM)์ด ์์ง ๊ธฐ๊ธฐ์์ ๊ฐ๊ด๋ฐ๊ณ ์์ต๋๋ค. ๋์ ํจ์จ์ฑ๊ณผ ๋ฎ์ ์ฐ์ฐ ๋น์ฉ ๋๋ถ์ด์ฃ . ํ์ง๋ง Yi Sibo ๋ฑ ์ฐ๊ตฌ์ง์ ์ต๊ทผ ์ฐ๊ตฌ๋ SLM์ ๋ณด์์ ๋ํ ์ฌ๊ฐํ ์ฐ๋ ค๋ฅผ ์ ๊ธฐํฉ๋๋ค. ๋๊ท๋ชจ ์ธ์ด ๋ชจ๋ธ(LLM)์ ๋นํด ์๋์ ์ผ๋ก ์ฐ๊ตฌ๊ฐ ๋ถ์กฑํ๋ SLM์ ๋ณด์ ์ทจ์ฝ์ฑ์ด ์ด๋ฒ ์ฐ๊ตฌ๋ฅผ ํตํด ๋๋ฌ๋ฌ๊ธฐ ๋๋ฌธ์ ๋๋ค.
13๊ฐ ์ต์ฒจ๋จ SLM, ํ์ฅ ๊ณต๊ฒฉ์ ์์๋ฌด์ฑ ?
์ฐ๊ตฌ์ง์ 13๊ฐ์ ์ต์ฒจ๋จ SLM์ ๋์์ผ๋ก ๋ค์ํ ํ์ฅ ๊ณต๊ฒฉ์ ์๋ํ์ต๋๋ค. ๊ทธ ๊ฒฐ๊ณผ๋ ์ถฉ๊ฒฉ์ ์ ๋๋ค. ๋๋ถ๋ถ์ SLM์ด ๊ธฐ์กด ํ์ฅ ๊ณต๊ฒฉ์ ์ทจ์ฝํ์ผ๋ฉฐ, ์ผ๋ถ๋ ์ง์ ์ ์ธ ์ ์์ ์ธ ํ๋กฌํํธ์๋ ์์๋ฌด์ฑ ์ผ๋ก ๋ฐ์ํ์ต๋๋ค. ์ด๋ SLM์ ์ค์ ๋ฐฐํฌ ๋ฐ ํ์ฉ์ ์์ด ์ฌ๊ฐํ ์ํ์ ์์ฌํฉ๋๋ค. ๋ง์น ์ ๋ฆ์ธ ๋ณด์์ฒ๋ผ ๋ณด์ด๋ SLM์ด์ง๋ง, ๊ทธ ๋ด๋ถ์๋ ์น๋ช ์ ์ธ ๊ฒฐํจ์ด ์จ๊ฒจ์ ธ ์์๋ ์ ์ ๋๋ค.
์์ ์ ์ํ ๋ฐฉ์ด ๊ธฐ๋ฒ๊ณผ SLM ์ค๊ณ ๊ฐ์
์ฐ๊ตฌ์ง์ ์ด๋ฌํ ์ํ์ ๋์ํ๊ธฐ ์ํด ์ฌ๋ฌ ๋ฐฉ์ด ๊ธฐ๋ฒ์ ํ๊ฐํ๊ณ ๊ทธ ํจ๊ณผ๋ฅผ ์ ์ฆํ์ต๋๋ค. ๋ ๋์๊ฐ, ์ํคํ ์ฒ ์์ถ, ์์ํ, ์ง์ ์ฆ๋ฅ ๋ฑ ๋ค์ํ SLM ๊ธฐ๋ฒ์ด ๋ณด์์ ๋ฏธ์น๋ ์ํฅ๋ ๋ถ์ํ์ต๋๋ค. ์ด๋ SLM ๊ฐ๋ฐ์ ์์ด ๋ณด์์ ๊ณ ๋ คํ ์ค๊ณ์ ์ค์์ฑ์ ๊ฐ์กฐํ๋ ๊ฒฐ๊ณผ์ ๋๋ค. ๋จ์ํ ์ฑ๋ฅ๋ง์ ์ถ๊ตฌํ๋ ๊ฒ์ด ์๋๋ผ, ๋ณด์๊ณผ ์์ ์ฑ์ ๋์์ ํ๋ณดํด์ผ ํจ์ ๋ณด์ฌ์ฃผ๋ ๊ฒ์ด์ฃ .
๋ฏธ๋๋ฅผ ์ํ ํต์ฐฐ: ๋์ฑ ๊ฐ๋ ฅํ๊ณ ์์ ํ SLM์ ํฅํ์ฌ
์ด ์ฐ๊ตฌ๋ SLM์ ๋ณด์์ ๋ํ ์๋ก์ด ์๊ฐ์ ์ ๊ณตํฉ๋๋ค. SLM์ ํจ์จ์ฑ๋ง์ ๊ฐ์กฐํ๋ ๊ฒ์ด ์๋๋ผ, ๊ทธ ์์ ์ฑ์ ํ๋ณดํ๊ธฐ ์ํ ๋ ธ๋ ฅ์ด ๋ณํ๋์ด์ผ ํจ์ ๋ช ํํ ๋ณด์ฌ์ค๋๋ค. ์ฐ๊ตฌ์ง์ ์ด ์ฐ๊ตฌ ๊ฒฐ๊ณผ๊ฐ ๋์ฑ ๊ฐ๋ ฅํ๊ณ ์์ ํ SLM์ ๊ฐ๋ฐํ๋ ๋ฐ ์ค์ํ ์ด์ ํ๊ฐ ๋ ๊ฒ์ด๋ผ๊ณ ๊ธฐ๋ํ๊ณ ์์ต๋๋ค. ์ฐ๋ฆฌ๋ ์ด์ SLM์ ๋ณด์์ ๋ํ ์ธ์์ ๋์ด๊ณ , ์์ ํ AI ์์คํ ๊ตฌ์ถ์ ์ํ ๋ ธ๋ ฅ์ ๋์ฑ ๊ฐํํด์ผ ํฉ๋๋ค. ๊ทธ๊ฒ์ ๋จ์ํ ๊ธฐ์ ์ ๊ณผ์ ๊ฐ ์๋, ์ฐ๋ฆฌ ์ฌํ์ ์์ ๊ณผ ์ง๊ฒฐ๋๋ ๋ฌธ์ ์ด๊ธฐ ๋๋ฌธ์ ๋๋ค.
Reference
[arxiv] Behind the Tip of Efficiency: Uncovering the Submerged Threats of Jailbreak Attacks in Small Language Models
Published: ย (Updated: )
Author: Sibo Yi, Tianshuo Cong, Xinlei He, Qi Li, Jiaxing Song
http://arxiv.org/abs/2502.19883v2