๐คฏ AI๊ฐ ์ฝ๋ฉ ์ค๋ ฅ์ ๋ฐ์ด๋์ ์ ์์๊น? LeetCode์ ChatGPT๋ฅผ ์ด์ฉํ ๋๋ผ์ด ์ฐ๊ตฌ ๊ฒฐ๊ณผ!
๋ณธ ์ฐ๊ตฌ๋ ์์ฑํ AI(GPT-4o)๊ฐ ์์ฑํ ์ฝ๋์ ์ฌ๋์ด ์์ฑํ ์ฝ๋๋ฅผ LeetCode ๋ฐ์ดํฐ๋ฅผ ๋ฐํ์ผ๋ก ๋น๊ต ๋ถ์ํ ๊ฒฐ๊ณผ๋ฅผ ์ ์ํฉ๋๋ค. GPT-4o๋ ์ฝ๋ ํ์ง, ๊ฐ๋ ์ฑ, ์คํ ์๊ฐ ์ธก๋ฉด์์ ์ฐ์์ฑ์ ๋ณด์์ผ๋ ๋ฉ๋ชจ๋ฆฌ ์ฌ์ฉ๋ ์ธก๋ฉด์์๋ ์ ์๋ฏธํ ์ฐจ์ด๊ฐ ์์์ผ๋ฉฐ, ํ๋ จ ๋ฐ์ดํฐ ๋ฒ์ ๋ฐ์ ๋ฌธ์ ์ ๋ํ ์ผ๋ฐํ ๋ฅ๋ ฅ์ด ์ ํ์ ์์ ํ์ธํ์ต๋๋ค.

AI, ์ํํธ์จ์ด ์์ง๋์ด๋ง์ ๋ฏธ๋๋ฅผ ์ฟ๋ณด๋ค: LeetCode & ChatGPT ์ฐ๊ตฌ ๋ถ์
์ต๊ทผ ์์ฑํ AI(GenAI)์ ๊ธ๋ถ์์ ์ํํธ์จ์ด ์์ง๋์ด๋ง๊ณผ ๊ต์ก ๋ถ์ผ๋ฅผ ํฌํจํ ๋ค์ํ ๋ถ์ผ์ ํ์ ์ ์ธ ๋ณํ๋ฅผ ๊ฐ์ ธ์ฌ ๊ฐ๋ฅ์ฑ์ ์ ์ํฉ๋๋ค. OpenAI์ ChatGPT์ ๊ฐ์ GenAI ๋๊ตฌ๊ฐ ์ํํธ์จ์ด ์์ง๋์ด๋ง์ ์ ์ ๋ ๋ง์ด ํ์ฉ๋จ์ ๋ฐ๋ผ, ์ด๋ฌํ ๊ธฐ์ ์ด ์ํํธ์จ์ด ์ ํ์ ๋ฏธ์น๋ ์ํฅ์ ์ดํดํ๋ ๊ฒ์ด ๋งค์ฐ ์ค์ํด์ก์ต๋๋ค.
Manuel Merkel๊ณผ Jens Dรถrpinghaus๊ฐ ์งํํ ์ต๊ทผ ์ฐ๊ตฌ๋ ์ด๋ฌํ ๊ถ๊ธ์ฆ์ ๋ํ ๋ต์ ์ฐพ๊ธฐ ์ํ ํฅ๋ฏธ๋ก์ด ์๋์ ๋๋ค. ์ฐ๊ตฌํ์ LeetCode์์ ์น ์คํฌ๋ํ๊ณผ ๋ฐ์ดํฐ ๋ง์ด๋ ๊ธฐ๋ฒ์ ์ฌ์ฉํ์ฌ LeetCode ์ฌ์ฉ์๊ฐ ์์ฑํ Python ํ๋ก๊ทธ๋จ๊ณผ GPT-4o๊ฐ ์์ฑํ ํ๋ก๊ทธ๋จ์ ์ํํธ์จ์ด ํ์ง์ ๋น๊ต ๋ถ์ํ์ต๋๋ค. ํต์ฌ ์ง๋ฌธ์ GPT-4o๊ฐ ์ฌ๋๋ณด๋ค ๋ ๋์ ํ์ง์ ์ํํธ์จ์ด๋ฅผ ์์ฑํ๋๊ฐ? ์์ต๋๋ค.
๋๋ผ์ด ๊ฒฐ๊ณผ: GPT-4o, ์ฝ๋ ํ์ง ํฅ์์ ๊ธฐ์ฌ?
์ฐ๊ตฌ ๊ฒฐ๊ณผ๋ ์๋นํ ํฅ๋ฏธ๋กญ์ต๋๋ค. GPT-4o๋ ์ ํ๋ ๊ท๋ชจ์์ ์ฝ๋๋ฅผ ์์ฑํ ๋ ์ฝ๋ ํ์ง, ๊ฐ๋ ์ฑ, ์คํ ์๊ฐ์ ์๋นํ ์ฅ์ ๋ฌผ์ด ๋์ง ์๋ ๊ฒ์ผ๋ก ๋ํ๋ฌ์ต๋๋ค. ์ค์ ๋ก, ์์ฑ๋ ์ฝ๋๋ ์ธ ๊ฐ์ง ์งํ ๋ชจ๋์์ ์ฌ์ฉ์ ์์ฑ ์ฝ๋๋ณด๋ค ํจ์ฌ ๋ฎ์ ๊ฐ์ ๋ณด์์ต๋๋ค. ํ์ง๋ง ์์๊ณผ๋ ๋ฌ๋ฆฌ ๋ฉ๋ชจ๋ฆฌ ์ฌ์ฉ๋ ์ธก๋ฉด์์๋ ์์ฑ๋ ์ฝ๋์ ์ฌ์ฉ์ ์ฝ๋ ๊ฐ์ ์ ์๋ฏธํ ์ฐจ์ด๊ฐ ๋ฐ๊ฒฌ๋์ง ์์์ต๋๋ค. ๋ํ GPT-4o๋ ํ๋ จ ๋ฐ์ดํฐ์ ์ ํฌํจ๋์ง ์์ ๋ฌธ์ ์๋ ์ผ๋ฐํํ๋ ๋ฐ ์ด๋ ค์์ ๊ฒช๋๋ค๋ ์ ๋ ํ์ธ๋์์ต๋๋ค.
์ฐ๊ตฌ์ ์์์ ํฅํ ๊ณผ์
์ด ์ฐ๊ตฌ๋ ์ฝ๋ ํ์ง, ๊ฐ๋ ์ฑ, ์๊ฐ์ ๋์, ์์ ํ์ฉ ๋ฑ ๋ค์ํ ์ธก๋ฉด์์ ์์ฑ๋ ์ฝ๋์ ์ฌ๋์ด ์์ฑํ ์ฝ๋๋ฅผ ๋๊ท๋ชจ๋ก ๋น๊ต ๋ถ์ํ ์ต์ด์ ์ฐ๊ตฌ๋ผ๋ ์ ์์ ํฐ ์์๋ฅผ ์ง๋๋๋ค. ํนํ, ๊ณต๊ฐ์ ์ผ๋ก ์ด์ฉ ๊ฐ๋ฅํ LeetCode ๋ฐ์ดํฐ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํ๋ค๋ ์ ์ ํ์ ์ฐ๊ตฌ๋ฅผ ์ํ ์ค์ํ ๊ธฐ๋ฐ์ ๋ง๋ จํฉ๋๋ค. ํ์ง๋ง, GPT-4o์ ์ผ๋ฐํ ๋ฅ๋ ฅ ํฅ์ ๋ฐ ๋ฉ๋ชจ๋ฆฌ ์ฌ์ฉ๋ ์ต์ ํ์ ๋ํ ์ถ๊ฐ ์ฐ๊ตฌ๊ฐ ํ์ํ๋ฉฐ, AI ๊ธฐ๋ฐ ์ฝ๋ ์์ฑ ๋๊ตฌ์ ์ค์ ์ ์ฉ ๊ฐ๋ฅ์ฑ๊ณผ ์ค๋ฆฌ์ ๋ฌธ์ ์ ๋ํ ์ฌ๋์๋ ๋ ผ์๊ฐ ํ์ํฉ๋๋ค.
์ด๋ฒ ์ฐ๊ตฌ๋ AI๊ฐ ์ํํธ์จ์ด ์์ง๋์ด๋ง์ ํจ๋ฌ๋ค์์ ๋ณํ์ํฌ ์ ์ฌ๋ ฅ์ ๋ณด์ฌ์ฃผ๋ ๋์์, ์ฌ์ ํ ํด๊ฒฐํด์ผ ํ ๊ณผ์ ๋ค์ด ๋จ์์์์ ์์ฌํฉ๋๋ค. ์์ผ๋ก AI์ ์ธ๊ฐ์ ํ๋ ฅ์ ํตํด ์ํํธ์จ์ด ๊ฐ๋ฐ์ ํจ์จ์ฑ๊ณผ ํ์ง์ ๋์ฑ ํฅ์์ํฌ ์ ์์ ๊ฒ์ผ๋ก ๊ธฐ๋๋ฉ๋๋ค.
Reference
[arxiv] A case study on the transformative potential of AI in software engineering on LeetCode and ChatGPT
Published: ย (Updated: )
Author: Manuel Merkel, Jens Dรถrpinghaus
http://arxiv.org/abs/2501.03639v1