2026-04-16

SWE-bench Pro ์ฝ”๋”ฉ ๋ฒค์น˜๋งˆํฌ์—์„œ 64.3%๋ฅผ ๊ธฐ๋กํ•ด ์ „์ž‘ Opus 4.6(53.4%)๊ณผ OpenAI GPT-5.4(57.7%)๋ฅผ ๋ชจ๋‘ ์•ž์งˆ๋ €๊ฑฐ๋“ ์š”

๐Ÿ’ก ํ•œ์ค„ ์š”์•ฝ|SWE-bench Pro ์ฝ”๋”ฉ ๋ฒค์น˜๋งˆํฌ์—์„œ 64.3%๋ฅผ ๊ธฐ๋กํ•ด ์ „์ž‘ Opus 4.6(53.4%)๊ณผ OpenAI GPT-5.4(57.7%)๋ฅผ ๋ชจ๋‘ ์•ž์งˆ๋ €๊ฑฐ๋“ ์š”.

Anthropic์ด Claude Opus 4.7์„ ๊ณต๊ฐœํ–ˆ์–ด์š”. SWE-bench Pro ์ฝ”๋”ฉ ๋ฒค์น˜๋งˆํฌ์—์„œ 64.3%๋ฅผ ๊ธฐ๋กํ•ด ์ „์ž‘ Opus 4.6(53.4%)๊ณผ OpenAI GPT-5.4(57.7%)๋ฅผ ๋ชจ๋‘ ์•ž์งˆ๋ €๊ฑฐ๋“ ์š”.

์ด๋ฏธ์ง€ ์ฒ˜๋ฆฌ ๋Šฅ๋ ฅ๋„ ๋Œ€ํญ ์˜ฌ๋ž์–ด์š”. ์ด์ „ ๋ชจ๋ธ ๋Œ€๋น„ 3๋ฐฐ ์ด์ƒ์ธ ์ตœ๋Œ€ 3.75๋ฉ”๊ฐ€ํ”ฝ์…€๊นŒ์ง€ ์ง€์›ํ•˜๊ณ , ๋ฌธ์„œ ์ถ”๋ก  ๋ฒค์น˜๋งˆํฌ(OfficeQA Pro)์—์„œ๋Š” 57.1%์—์„œ 80.6%๋กœ ์„ฑ๋Šฅ์ด ํฌ๊ฒŒ ๋›ฐ์—ˆ์–ด์š”.

๋ˆˆ์— ๋„๋Š” ๊ฑด ์‚ฌ์ด๋ฒ„๋ณด์•ˆ ๊ธฐ๋Šฅ์„ ์˜๋„์ ์œผ๋กœ ์ œํ•œํ–ˆ๋‹ค๋Š” ์ ์ด์—์š”. ํ•™์Šต ๋‹จ๊ณ„์—์„œ ํŠน์ • ์‚ฌ์ด๋ฒ„ ๊ด€๋ จ ๋Šฅ๋ ฅ์„ ์ค„์ด๋Š” ์‹คํ—˜์„ ์ง„ํ–‰ํ–ˆ๊ณ , ์œ„ํ—˜ ๊ฐ€๋Šฅ์„ฑ์ด ์žˆ๋Š” ์š”์ฒญ์„ ์ž๋™์œผ๋กœ ๊ฐ์ง€ํ•ด ์ฐจ๋‹จํ•˜๋Š” ์žฅ์น˜๋„ ์ถ”๊ฐ€๋์–ด์š”.

์ฝ”๋”ฉ ์„ฑ๋Šฅ์€ ๋†’์ด๋ฉด์„œ ์œ„ํ—˜ ๊ธฐ๋Šฅ์€ ๋‚ฎ์ถ”๋Š” ๋ฐฉํ–ฅ, AI ์•ˆ์ „์„ฑ๊ณผ ์„ฑ๋Šฅ ์‚ฌ์ด์˜ ๊ท ํ˜•์„ ์˜๋„์ ์œผ๋กœ ์„ค๊ณ„ํ•œ ์ฒซ ๋ฒˆ์งธ ์‹œ๋„๋ผ๋Š” ์ ์—์„œ ์ฃผ๋ชฉํ•  ๋งŒํ•ด์š”.

์ด ๊ธ€์ด ์–ด๋• ๋‚˜์š”?

๊ด€๋ จ ๊ธ€

Claude Code๋กœ ์ดˆ๊ธฐ ์ฝ”๋“œ๋ฅผ ์ƒ์„ฑํ–ˆ๋Š”๋ฐ main.go๊ฐ€ 2,282์ค„์งœ๋ฆฌ ๋ชจ๋†€๋ฆฌ์Šค๊ฐ€ ๋๊ฑฐ๋“ ์š”

Claude Code๋กœ ์ดˆ๊ธฐ ์ฝ”๋“œ๋ฅผ ์ƒ์„ฑํ–ˆ๋Š”๋ฐ main.go๊ฐ€ 2,282์ค„์งœ๋ฆฌ ๋ชจ๋†€๋ฆฌ์Šค๊ฐ€ ๋๊ฑฐ๋“ ์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”

๊ฒŒ์ž„ ๊ธฐํš๋ถ€ํ„ฐ ์ œ์ž‘, ํ…Œ์ŠคํŠธ๊นŒ์ง€ ์ „ ๊ณผ์ •์„ ์ปค๋ฒ„ํ•˜๋Š” ์—์ด์ „ํ‹ฑ ๊ธฐ๋Šฅ๋“ค์„ ์ƒˆ๋กœ ๊ณต๊ฐœํ–ˆ๊ฑฐ๋“ ์š”

๊ฒŒ์ž„ ๊ธฐํš๋ถ€ํ„ฐ ์ œ์ž‘, ํ…Œ์ŠคํŠธ๊นŒ์ง€ ์ „ ๊ณผ์ •์„ ์ปค๋ฒ„ํ•˜๋Š” ์—์ด์ „ํ‹ฑ ๊ธฐ๋Šฅ๋“ค์„ ์ƒˆ๋กœ ๊ณต๊ฐœํ–ˆ๊ฑฐ๋“ ์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”

์ด 350์–ต ๊ฐœ ํŒŒ๋ผ๋ฏธํ„ฐ ์ค‘ ์‹ค์ œ ์ถ”๋ก ์—๋Š” 30์–ต ๊ฐœ๋งŒ ํ™œ์„ฑํ™”๋˜๋Š” ํฌ์†Œ MoE ๊ตฌ์กฐ์˜ˆ์š”

์ด 350์–ต ๊ฐœ ํŒŒ๋ผ๋ฏธํ„ฐ ์ค‘ ์‹ค์ œ ์ถ”๋ก ์—๋Š” 30์–ต ๊ฐœ๋งŒ ํ™œ์„ฑํ™”๋˜๋Š” ํฌ์†Œ MoE ๊ตฌ์กฐ์˜ˆ์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”