2026-03-25

ํ•ต์‹ฌ์€ ๊ฑฐ๋Œ€ํ•œ ์ฝ”๋“œ๋ฅผ ํ•œ ๋ฒˆ์— ๋‹ค๋ฃจ์ง€ ์•Š๊ณ , factored POMDP๋กœ ์ž‘์—…์„ ์ชผ๊ฐœ์„œ ๊ฐ ๋‹จ๊ณ„๋งˆ๋‹ค ํ•„์š”ํ•œ ์ƒํƒœ ๋ณ€์ˆ˜๋งŒ ๋ณด๊ฒŒ ํ•œ ์ ์ด์—์š”

๐Ÿ’ก ํ•œ์ค„ ์š”์•ฝ|ํ•ต์‹ฌ์€ ๊ฑฐ๋Œ€ํ•œ ์ฝ”๋“œ๋ฅผ ํ•œ ๋ฒˆ์— ๋‹ค๋ฃจ์ง€ ์•Š๊ณ , factored POMDP๋กœ ์ž‘์—…์„ ์ชผ๊ฐœ์„œ ๊ฐ ๋‹จ๊ณ„๋งˆ๋‹ค ํ•„์š”ํ•œ ์ƒํƒœ ๋ณ€์ˆ˜๋งŒ ๋ณด๊ฒŒ ํ•œ ์ ์ด์—์š”.

FactorSmith๊ฐ€ ์ž์—ฐ์–ด ์„ค๋ช…๋งŒ์œผ๋กœ ์‹คํ–‰ ๊ฐ€๋Šฅํ•œ ๊ฒŒ์ž„ ์‹œ๋ฎฌ๋ ˆ์ด์…˜ ์ฝ”๋“œ๋ฅผ ๋” ์ •ํ™•ํ•˜๊ฒŒ ๋งŒ๋“œ๋Š” ๋ฐฉ๋ฒ•์„ ๋‚ด๋†จ์–ด์š”.

ํ•ต์‹ฌ์€ ๊ฑฐ๋Œ€ํ•œ ์ฝ”๋“œ๋ฅผ ํ•œ ๋ฒˆ์— ๋‹ค๋ฃจ์ง€ ์•Š๊ณ , factored POMDP๋กœ ์ž‘์—…์„ ์ชผ๊ฐœ์„œ ๊ฐ ๋‹จ๊ณ„๋งˆ๋‹ค ํ•„์š”ํ•œ ์ƒํƒœ ๋ณ€์ˆ˜๋งŒ ๋ณด๊ฒŒ ํ•œ ์ ์ด์—์š”. LLM์ด ๋งค ํ˜ธ์ถœ๋งˆ๋‹ค ์ฒ˜๋ฆฌํ•ด์•ผ ํ•  ์ปจํ…์ŠคํŠธ๋ฅผ ์ค„์—ฌ ์ถ”๋ก  ๋ถ€๋‹ด์„ ๋‚ฎ์ท„๊ฑฐ๋“ ์š”.

์—ฌ๊ธฐ์— Planner-Designer-Critic 3์—์ด์ „ํŠธ ๋ฃจํ”„๋ฅผ ๊ฐ ๋‹จ๊ณ„์— ๋„ฃ์–ด, ์„ค๊ณ„์•ˆ ์ƒ์„ฑโ†’๊ตฌ์กฐํ™” ์ ์ˆ˜ ํ‰๊ฐ€โ†’์ฒดํฌํฌ์ธํŠธ ๋กค๋ฐฑ ๊ธฐ๋ฐ˜ ๋ฐ˜๋ณต ๊ฐœ์„ ์„ ์ˆ˜ํ–‰ํ•ด์š”. ๋…ผ๋ฌธ์€ arXiv:2603.20270(v1), 2026๋…„ 3์›” 15์ผ ๊ณต๊ฐœ๋๊ณ , PyGame Learning Environment ๋ฒค์น˜๋งˆํฌ์—์„œ ํ”„๋กฌํ”„ํŠธ ์ •ํ•ฉ์„ฑ, ๋Ÿฐํƒ€์ž„ ์—๋Ÿฌ, ์ฝ”๋“œ ํ’ˆ์งˆ์ด ๋น„์—์ด์ „ํŠธ ๋ถ„ํ•ด ๋ฒ ์ด์Šค๋ผ์ธ๋ณด๋‹ค ๊ฐœ์„ ๋๋‹ค๊ณ  ๋ณด๊ณ ํ–ˆ์–ด์š”.

์˜๋ฏธ๋Š” ๋ถ„๋ช…ํ•ด์š”. ์•ž์œผ๋กœ๋Š” โ€œ๋ชจ๋ธ ํฌ๊ธฐโ€ ๊ฒฝ์Ÿ๋ณด๋‹ค, ๋ฌธ์ œ ๋ถ„ํ•ด์™€ ๋‹ค์ค‘ ์—์ด์ „ํŠธ ๊ฒ€์ฆ ๊ฐ™์€ ์ƒ์„ฑ ํŒŒ์ดํ”„๋ผ์ธ ์„ค๊ณ„๊ฐ€ ์‹ค์ „ ์„ฑ๋Šฅ์„ ๋” ํฌ๊ฒŒ ๊ฐ€๋ฅผ ๊ฐ€๋Šฅ์„ฑ์ด ์ปค์กŒ์–ด์š”.

์ด ๊ธ€์ด ์–ด๋• ๋‚˜์š”?

๊ด€๋ จ ๊ธ€

arXiv:2603.20267์—์„œ ์ œ์•ˆํ•œ DST๋Š” ToT์— ๋ถ™์ด๋Š” ํ”Œ๋Ÿฌ๊ทธ์•คํ”Œ๋ ˆ์ด ์˜ˆ์ธก๊ธฐ์˜ˆ์š”

arXiv:2603.20267์—์„œ ์ œ์•ˆํ•œ DST๋Š” ToT์— ๋ถ™์ด๋Š” ํ”Œ๋Ÿฌ๊ทธ์•คํ”Œ๋ ˆ์ด ์˜ˆ์ธก๊ธฐ์˜ˆ์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”

์ด ๋ฐฉ๋ฒ•์€ ๋งˆ๋ฅด์ฝ”ํ”„ ์ „์ด ๊ธฐ๋ฐ˜์œผ๋กœ ์ถ”๋ก  ํ๋ฆ„์„ ํ™•๋ฅ ์ ์œผ๋กœ ๋ชจ๋ธ๋งํ•˜๊ณ , Causal Delta Feature์™€ Jump Detection์œผ๋กœ ์œ„ํ—˜์ด ๊ธ‰๊ฐ€์†๋˜๋Š” ์ง€์ ์„ ์ฐพ์•„๋‚ด์š”

์ด ๋ฐฉ๋ฒ•์€ ๋งˆ๋ฅด์ฝ”ํ”„ ์ „์ด ๊ธฐ๋ฐ˜์œผ๋กœ ์ถ”๋ก  ํ๋ฆ„์„ ํ™•๋ฅ ์ ์œผ๋กœ ๋ชจ๋ธ๋งํ•˜๊ณ , Causal Delta Feature์™€ Jump Detection์œผ๋กœ ์œ„ํ—˜์ด ๊ธ‰๊ฐ€์†๋˜๋Š” ์ง€์ ์„ ์ฐพ์•„๋‚ด์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”

๊ธฐ์กด LoRA๋Š” ๋žญํฌ๋ฅผ ๋‚ฎ์ถฐ๋„ ๋ ˆ์ด์–ด ํญ์— ๋ฌถ์—ฌ ์ตœ์†Œ ์—…๋ฐ์ดํŠธ๊ฐ€ ํฌ๊ฒŒ ๋‚จ๋Š”๋ฐ, ์˜ˆ์‹œ๋กœ Llama3-8B๋Š” rank 1์—์„œ๋„ ์•ฝ 300๋งŒ ํŒŒ๋ผ๋ฏธํ„ฐ๊ฐ€ ํ•„์š”ํ–ˆ๊ฑฐ๋“ ์š”

๊ธฐ์กด LoRA๋Š” ๋žญํฌ๋ฅผ ๋‚ฎ์ถฐ๋„ ๋ ˆ์ด์–ด ํญ์— ๋ฌถ์—ฌ ์ตœ์†Œ ์—…๋ฐ์ดํŠธ๊ฐ€ ํฌ๊ฒŒ ๋‚จ๋Š”๋ฐ, ์˜ˆ์‹œ๋กœ Llama3-8B๋Š” rank 1์—์„œ๋„ ์•ฝ 300๋งŒ ํŒŒ๋ผ๋ฏธํ„ฐ๊ฐ€ ํ•„์š”ํ–ˆ๊ฑฐ๋“ ์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”