작돌쌀작돌쌀
2026-05-24

μ—°κ΅¬νŒ€μ€ 8개 μ›Ή ν”„λ ˆμž„μ›Œν¬μ—μ„œ κ·Έλ¦°ν•„λ“œ 80개, κΈ°λŠ₯ μΆ”κ°€ 20개 과제λ₯Ό 같은 API κ³„μ•½μœΌλ‘œ λΉ„κ΅ν–ˆμ–΄μš”

πŸ’‘ ν•œμ€„ μš”μ•½|μ—°κ΅¬νŒ€μ€ 8개 μ›Ή ν”„λ ˆμž„μ›Œν¬μ—μ„œ κ·Έλ¦°ν•„λ“œ 80개, κΈ°λŠ₯ μΆ”κ°€ 20개 과제λ₯Ό 같은 API κ³„μ•½μœΌλ‘œ λΉ„κ΅ν–ˆμ–΄μš”.

μƒˆ arXiv μ—°κ΅¬μ—μ„œ LLM μ½”λ“œ μ—μ΄μ „νŠΈκ°€ λ°±μ—”λ“œ ꡬ쑰 μ œμ•½μ΄ 늘수둝 μ„±λŠ₯이 λ¬΄λ„ˆμ§€λŠ” ν˜„μƒμ΄ ν™•μΈλμ–΄μš”.

μ—°κ΅¬νŒ€μ€ 8개 μ›Ή ν”„λ ˆμž„μ›Œν¬μ—μ„œ κ·Έλ¦°ν•„λ“œ 80개, κΈ°λŠ₯ μΆ”κ°€ 20개 과제λ₯Ό 같은 API κ³„μ•½μœΌλ‘œ λΉ„κ΅ν–ˆμ–΄μš”. λ™μž‘ ν…ŒμŠ€νŠΈμ™€ 정적 검증을 ν•¨κ»˜ 돌렀 ꡬ쑰 λ³΅μž‘λ„ 영ν–₯만 λΆ„λ¦¬ν–ˆκ±°λ“ μš”.

κ²°κ³ΌλŠ” λšœλ ·ν–ˆμ–΄μš”. κ°•ν•œ 섀정도 κΈ°μ€€ λŒ€λΉ„ assertion pass rateκ°€ 평균 30포인트 ν•˜λ½ν–ˆκ³ , μ•½ν•œ μ„€μ • μΌλΆ€λŠ” 거의 0에 κ°€κΉŒμ›Œμ‘Œμ–΄μš”. Flask 같은 λͺ…μ‹œμ  ν”„λ ˆμž„μ›Œν¬μ—μ„  μƒλŒ€μ μœΌλ‘œ μž˜ν–ˆμ§€λ§Œ FastAPIΒ·Django처럼 κ΄€λ‘€ 쀑심 ν™˜κ²½μ—μ„  평균 μ„±λŠ₯이 더 λ–¨μ–΄μ‘Œμ–΄μš”.

핡심은 κΈ°λŠ₯ κ΅¬ν˜„λ§Œ λ§žλŠ” μ½”λ“œμ™€ 운영 κ°€λŠ₯ν•œ μ½”λ“œ 사이 간극이 아직 ν¬λ‹€λŠ” μ μ΄μ—μš”.

이 글이 μ–΄λ• λ‚˜μš”?

κ΄€λ ¨ κΈ€

핡심은 '반볡 μž‘μ—… μžλ™ν™”'μ˜ˆμš”

핡심은 '반볡 μž‘μ—… μžλ™ν™”'μ˜ˆμš”.

작돌쌀2λΆ„ μ†Œμš”

λ¬Έμ œλŠ” κ·œμΉ™ μžμ²΄κ°€ μ—†λ‹€λŠ” κ±°μ˜ˆμš”

λ¬Έμ œλŠ” κ·œμΉ™ μžμ²΄κ°€ μ—†λ‹€λŠ” κ±°μ˜ˆμš”.

작돌쌀2λΆ„ μ†Œμš”

/fusion λͺ…λ Ήμ–΄λ₯Ό μ‹€ν–‰ν•˜λ©΄ μ΅œλŒ€ 5개의 ν”Œλž˜λ„ˆ λͺ¨λΈμ΄ λ³‘λ ¬λ‘œ κ³„νšμ„ μ„Έμš°κ³ , 메인 λͺ¨λΈμ΄ μ‹€μ œ μž‘μ—…μ„ μˆ˜ν–‰ν•œ λ’€, μ΅œλŒ€ 5개의 리뷰어 λͺ¨λΈμ΄ 결과물을 κ²€ν† ν•˜λŠ” κ΅¬μ‘°κ±°λ“ μš”

/fusion λͺ…λ Ήμ–΄λ₯Ό μ‹€ν–‰ν•˜λ©΄ μ΅œλŒ€ 5개의 ν”Œλž˜λ„ˆ λͺ¨λΈμ΄ λ³‘λ ¬λ‘œ κ³„νšμ„ μ„Έμš°κ³ , 메인 λͺ¨λΈμ΄ μ‹€μ œ μž‘μ—…μ„ μˆ˜ν–‰ν•œ λ’€, μ΅œλŒ€ 5개의 리뷰어 λͺ¨λΈμ΄ 결과물을 κ²€ν† ν•˜λŠ” κ΅¬μ‘°κ±°λ“ μš”.

작돌쌀2λΆ„ μ†Œμš”