๐Ÿคฏ AI๊ฐ€ ์ฝ”๋”ฉ ์‹ค๋ ฅ์„ ๋›ฐ์–ด๋„˜์„ ์ˆ˜ ์žˆ์„๊นŒ? LeetCode์™€ ChatGPT๋ฅผ ์ด์šฉํ•œ ๋†€๋ผ์šด ์—ฐ๊ตฌ ๊ฒฐ๊ณผ!


๋ณธ ์—ฐ๊ตฌ๋Š” ์ƒ์„ฑํ˜• AI(GPT-4o)๊ฐ€ ์ƒ์„ฑํ•œ ์ฝ”๋“œ์™€ ์‚ฌ๋žŒ์ด ์ž‘์„ฑํ•œ ์ฝ”๋“œ๋ฅผ LeetCode ๋ฐ์ดํ„ฐ๋ฅผ ๋ฐ”ํƒ•์œผ๋กœ ๋น„๊ต ๋ถ„์„ํ•œ ๊ฒฐ๊ณผ๋ฅผ ์ œ์‹œํ•ฉ๋‹ˆ๋‹ค. GPT-4o๋Š” ์ฝ”๋“œ ํ’ˆ์งˆ, ๊ฐ€๋…์„ฑ, ์‹คํ–‰ ์‹œ๊ฐ„ ์ธก๋ฉด์—์„œ ์šฐ์ˆ˜์„ฑ์„ ๋ณด์˜€์œผ๋‚˜ ๋ฉ”๋ชจ๋ฆฌ ์‚ฌ์šฉ๋Ÿ‰ ์ธก๋ฉด์—์„œ๋Š” ์œ ์˜๋ฏธํ•œ ์ฐจ์ด๊ฐ€ ์—†์—ˆ์œผ๋ฉฐ, ํ›ˆ๋ จ ๋ฐ์ดํ„ฐ ๋ฒ”์œ„ ๋ฐ–์˜ ๋ฌธ์ œ์— ๋Œ€ํ•œ ์ผ๋ฐ˜ํ™” ๋Šฅ๋ ฅ์ด ์ œํ•œ์ ์ž„์„ ํ™•์ธํ–ˆ์Šต๋‹ˆ๋‹ค.

related iamge

AI, ์†Œํ”„ํŠธ์›จ์–ด ์—”์ง€๋‹ˆ์–ด๋ง์˜ ๋ฏธ๋ž˜๋ฅผ ์—ฟ๋ณด๋‹ค: LeetCode & ChatGPT ์—ฐ๊ตฌ ๋ถ„์„

์ตœ๊ทผ ์ƒ์„ฑํ˜• AI(GenAI)์˜ ๊ธ‰๋ถ€์ƒ์€ ์†Œํ”„ํŠธ์›จ์–ด ์—”์ง€๋‹ˆ์–ด๋ง๊ณผ ๊ต์œก ๋ถ„์•ผ๋ฅผ ํฌํ•จํ•œ ๋‹ค์–‘ํ•œ ๋ถ„์•ผ์— ํ˜์‹ ์ ์ธ ๋ณ€ํ™”๋ฅผ ๊ฐ€์ ธ์˜ฌ ๊ฐ€๋Šฅ์„ฑ์„ ์ œ์‹œํ•ฉ๋‹ˆ๋‹ค. OpenAI์˜ ChatGPT์™€ ๊ฐ™์€ GenAI ๋„๊ตฌ๊ฐ€ ์†Œํ”„ํŠธ์›จ์–ด ์—”์ง€๋‹ˆ์–ด๋ง์— ์ ์  ๋” ๋งŽ์ด ํ™œ์šฉ๋จ์— ๋”ฐ๋ผ, ์ด๋Ÿฌํ•œ ๊ธฐ์ˆ ์ด ์†Œํ”„ํŠธ์›จ์–ด ์ œํ’ˆ์— ๋ฏธ์น˜๋Š” ์˜ํ–ฅ์„ ์ดํ•ดํ•˜๋Š” ๊ฒƒ์ด ๋งค์šฐ ์ค‘์š”ํ•ด์กŒ์Šต๋‹ˆ๋‹ค.

Manuel Merkel๊ณผ Jens Dรถrpinghaus๊ฐ€ ์ง„ํ–‰ํ•œ ์ตœ๊ทผ ์—ฐ๊ตฌ๋Š” ์ด๋Ÿฌํ•œ ๊ถ๊ธˆ์ฆ์— ๋Œ€ํ•œ ๋‹ต์„ ์ฐพ๊ธฐ ์œ„ํ•œ ํฅ๋ฏธ๋กœ์šด ์‹œ๋„์ž…๋‹ˆ๋‹ค. ์—ฐ๊ตฌํŒ€์€ LeetCode์—์„œ ์›น ์Šคํฌ๋ž˜ํ•‘๊ณผ ๋ฐ์ดํ„ฐ ๋งˆ์ด๋‹ ๊ธฐ๋ฒ•์„ ์‚ฌ์šฉํ•˜์—ฌ LeetCode ์‚ฌ์šฉ์ž๊ฐ€ ์ž‘์„ฑํ•œ Python ํ”„๋กœ๊ทธ๋žจ๊ณผ GPT-4o๊ฐ€ ์ƒ์„ฑํ•œ ํ”„๋กœ๊ทธ๋žจ์˜ ์†Œํ”„ํŠธ์›จ์–ด ํ’ˆ์งˆ์„ ๋น„๊ต ๋ถ„์„ํ–ˆ์Šต๋‹ˆ๋‹ค. ํ•ต์‹ฌ ์งˆ๋ฌธ์€ GPT-4o๊ฐ€ ์‚ฌ๋žŒ๋ณด๋‹ค ๋” ๋‚˜์€ ํ’ˆ์งˆ์˜ ์†Œํ”„ํŠธ์›จ์–ด๋ฅผ ์ƒ์„ฑํ•˜๋Š”๊ฐ€? ์˜€์Šต๋‹ˆ๋‹ค.

๋†€๋ผ์šด ๊ฒฐ๊ณผ: GPT-4o, ์ฝ”๋“œ ํ’ˆ์งˆ ํ–ฅ์ƒ์— ๊ธฐ์—ฌ?

์—ฐ๊ตฌ ๊ฒฐ๊ณผ๋Š” ์ƒ๋‹นํžˆ ํฅ๋ฏธ๋กญ์Šต๋‹ˆ๋‹ค. GPT-4o๋Š” ์ œํ•œ๋œ ๊ทœ๋ชจ์—์„œ ์ฝ”๋“œ๋ฅผ ์ƒ์„ฑํ•  ๋•Œ ์ฝ”๋“œ ํ’ˆ์งˆ, ๊ฐ€๋…์„ฑ, ์‹คํ–‰ ์‹œ๊ฐ„์— ์ƒ๋‹นํ•œ ์žฅ์• ๋ฌผ์ด ๋˜์ง€ ์•Š๋Š” ๊ฒƒ์œผ๋กœ ๋‚˜ํƒ€๋‚ฌ์Šต๋‹ˆ๋‹ค. ์‹ค์ œ๋กœ, ์ƒ์„ฑ๋œ ์ฝ”๋“œ๋Š” ์„ธ ๊ฐ€์ง€ ์ง€ํ‘œ ๋ชจ๋‘์—์„œ ์‚ฌ์šฉ์ž ์ž‘์„ฑ ์ฝ”๋“œ๋ณด๋‹ค ํ›จ์”ฌ ๋‚ฎ์€ ๊ฐ’์„ ๋ณด์˜€์Šต๋‹ˆ๋‹ค. ํ•˜์ง€๋งŒ ์˜ˆ์ƒ๊ณผ๋Š” ๋‹ฌ๋ฆฌ ๋ฉ”๋ชจ๋ฆฌ ์‚ฌ์šฉ๋Ÿ‰ ์ธก๋ฉด์—์„œ๋Š” ์ƒ์„ฑ๋œ ์ฝ”๋“œ์™€ ์‚ฌ์šฉ์ž ์ฝ”๋“œ ๊ฐ„์— ์œ ์˜๋ฏธํ•œ ์ฐจ์ด๊ฐ€ ๋ฐœ๊ฒฌ๋˜์ง€ ์•Š์•˜์Šต๋‹ˆ๋‹ค. ๋˜ํ•œ GPT-4o๋Š” ํ›ˆ๋ จ ๋ฐ์ดํ„ฐ์…‹์— ํฌํ•จ๋˜์ง€ ์•Š์€ ๋ฌธ์ œ์—๋Š” ์ผ๋ฐ˜ํ™”ํ•˜๋Š” ๋ฐ ์–ด๋ ค์›€์„ ๊ฒช๋Š”๋‹ค๋Š” ์ ๋„ ํ™•์ธ๋˜์—ˆ์Šต๋‹ˆ๋‹ค.

์—ฐ๊ตฌ์˜ ์˜์˜์™€ ํ–ฅํ›„ ๊ณผ์ œ

์ด ์—ฐ๊ตฌ๋Š” ์ฝ”๋“œ ํ’ˆ์งˆ, ๊ฐ€๋…์„ฑ, ์‹œ๊ฐ„์  ๋™์ž‘, ์ž์› ํ™œ์šฉ ๋“ฑ ๋‹ค์–‘ํ•œ ์ธก๋ฉด์—์„œ ์ƒ์„ฑ๋œ ์ฝ”๋“œ์™€ ์‚ฌ๋žŒ์ด ์ž‘์„ฑํ•œ ์ฝ”๋“œ๋ฅผ ๋Œ€๊ทœ๋ชจ๋กœ ๋น„๊ต ๋ถ„์„ํ•œ ์ตœ์ดˆ์˜ ์—ฐ๊ตฌ๋ผ๋Š” ์ ์—์„œ ํฐ ์˜์˜๋ฅผ ์ง€๋‹™๋‹ˆ๋‹ค. ํŠนํžˆ, ๊ณต๊ฐœ์ ์œผ๋กœ ์ด์šฉ ๊ฐ€๋Šฅํ•œ LeetCode ๋ฐ์ดํ„ฐ๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ ํ–ˆ๋‹ค๋Š” ์ ์€ ํ›„์† ์—ฐ๊ตฌ๋ฅผ ์œ„ํ•œ ์ค‘์š”ํ•œ ๊ธฐ๋ฐ˜์„ ๋งˆ๋ จํ•ฉ๋‹ˆ๋‹ค. ํ•˜์ง€๋งŒ, GPT-4o์˜ ์ผ๋ฐ˜ํ™” ๋Šฅ๋ ฅ ํ–ฅ์ƒ ๋ฐ ๋ฉ”๋ชจ๋ฆฌ ์‚ฌ์šฉ๋Ÿ‰ ์ตœ์ ํ™”์— ๋Œ€ํ•œ ์ถ”๊ฐ€ ์—ฐ๊ตฌ๊ฐ€ ํ•„์š”ํ•˜๋ฉฐ, AI ๊ธฐ๋ฐ˜ ์ฝ”๋“œ ์ƒ์„ฑ ๋„๊ตฌ์˜ ์‹ค์ œ ์ ์šฉ ๊ฐ€๋Šฅ์„ฑ๊ณผ ์œค๋ฆฌ์  ๋ฌธ์ œ์— ๋Œ€ํ•œ ์‹ฌ๋„์žˆ๋Š” ๋…ผ์˜๊ฐ€ ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค.

์ด๋ฒˆ ์—ฐ๊ตฌ๋Š” AI๊ฐ€ ์†Œํ”„ํŠธ์›จ์–ด ์—”์ง€๋‹ˆ์–ด๋ง์˜ ํŒจ๋Ÿฌ๋‹ค์ž„์„ ๋ณ€ํ™”์‹œํ‚ฌ ์ž ์žฌ๋ ฅ์„ ๋ณด์—ฌ์ฃผ๋Š” ๋™์‹œ์—, ์—ฌ์ „ํžˆ ํ•ด๊ฒฐํ•ด์•ผ ํ•  ๊ณผ์ œ๋“ค์ด ๋‚จ์•„์žˆ์Œ์„ ์‹œ์‚ฌํ•ฉ๋‹ˆ๋‹ค. ์•ž์œผ๋กœ AI์™€ ์ธ๊ฐ„์˜ ํ˜‘๋ ฅ์„ ํ†ตํ•ด ์†Œํ”„ํŠธ์›จ์–ด ๊ฐœ๋ฐœ์˜ ํšจ์œจ์„ฑ๊ณผ ํ’ˆ์งˆ์„ ๋”์šฑ ํ–ฅ์ƒ์‹œํ‚ฌ ์ˆ˜ ์žˆ์„ ๊ฒƒ์œผ๋กœ ๊ธฐ๋Œ€๋ฉ๋‹ˆ๋‹ค.


*์ด ๊ธฐ์‚ฌ๋Š” AI๊ฐ€ ์ƒ์„ฑํ•œ ๋‚ด์šฉ์œผ๋กœ, ์ผ๋ถ€ ์ •๋ณด๊ฐ€ ์‹ค์ œ์™€ ๋‹ค๋ฅผ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ •ํ™•ํ•œ ํ™•์ธ์„ ์œ„ํ•ด ์ถ”๊ฐ€์ ์ธ ๊ฒ€์ฆ์„ ๊ถŒ์žฅ๋“œ๋ฆฝ๋‹ˆ๋‹ค.

Reference

[arxiv] A case study on the transformative potential of AI in software engineering on LeetCode and ChatGPT

Published: ย (Updated: )

Author: Manuel Merkel, Jens Dรถrpinghaus

http://arxiv.org/abs/2501.03639v1