2026-03-25

arXiv:2603.20267์—์„œ ์ œ์•ˆํ•œ DST๋Š” ToT์— ๋ถ™์ด๋Š” ํ”Œ๋Ÿฌ๊ทธ์•คํ”Œ๋ ˆ์ด ์˜ˆ์ธก๊ธฐ์˜ˆ์š”

๐Ÿ’ก ํ•œ์ค„ ์š”์•ฝ|arXiv:2603.20267์—์„œ ์ œ์•ˆํ•œ DST๋Š” ToT์— ๋ถ™์ด๋Š” ํ”Œ๋Ÿฌ๊ทธ์•คํ”Œ๋ ˆ์ด ์˜ˆ์ธก๊ธฐ์˜ˆ์š”.

ToT์˜ ๊ณ ์งˆ๋ณ‘์ด๋˜ ์ •ํ™•๋„-๋น„์šฉ ํŠธ๋ ˆ์ด๋“œ์˜คํ”„๋ฅผ, ์ƒˆ ๋ฐฉ์‹ DST๊ฐ€ ๊ณ„์‚ฐ๋Ÿ‰ ์ตœ๋Œ€ 75% ์ ˆ๊ฐ์œผ๋กœ ํ”๋“ค์—ˆ์–ด์š”.

arXiv:2603.20267์—์„œ ์ œ์•ˆํ•œ DST๋Š” ToT์— ๋ถ™์ด๋Š” ํ”Œ๋Ÿฌ๊ทธ์•คํ”Œ๋ ˆ์ด ์˜ˆ์ธก๊ธฐ์˜ˆ์š”. ๊ธฐ์กด์ฒ˜๋Ÿผ ๋ฌด๊ฑฐ์šด LLM ์ž๊ธฐํ‰๊ฐ€๋‚˜ ๊ณ ์ • ๊ทœ์น™ ๊ฐ€์ง€์น˜๊ธฐ ๋Œ€์‹ , ๊ฐ€๋ฒผ์šด ์ง€๋„ํ•™์Šต ํœด๋ฆฌ์Šคํ‹ฑ์œผ๋กœ ๋ถ„๊ธฐ ํƒ์ƒ‰์„ ์œ ์—ฐํ•˜๊ฒŒ ์กฐ์ ˆํ•˜๊ฑฐ๋“ ์š”.

ํ•ต์‹ฌ์€ ์‰ฌ์šด ๋‹จ๊ณ„์—์„  ๊ฑฐ์˜ ๊ทธ๋ฆฌ๋””ํ•˜๊ฒŒ ๋น ๋ฅด๊ฒŒ ๊ฐ€๊ณ , ๋ถˆํ™•์‹คํ•˜๊ฑฐ๋‚˜ ๋ณต์žกํ•œ ๊ตฌ๊ฐ„์—์„œ๋งŒ ํƒ์ƒ‰ ๋น”์„ ๋„“ํžˆ๋Š” ์ ์ด์—์š”. ์ˆ˜ํ•™ ์ถ”๋ก , ์ผ๋ฐ˜ ์ถ”๋ก , ๋ณต์žก ๋…ผ๋ฆฌ ์ถ”๋ก  ๋ฒค์น˜๋งˆํฌ ์ „๋ฐ˜์—์„œ ํ‘œ์ค€ ToT ํฌํ•จ ๊ฐ•ํ•œ ๋ฒ ์ด์Šค๋ผ์ธ๊ณผ ๋™๊ธ‰ ์ด์ƒ ์ •ํ™•๋„๋ฅผ ๋ณด์˜€๊ณ  ๊ณ„์‚ฐ ์˜ค๋ฒ„ํ—ค๋“œ๋Š” 26~75% ์ค„์˜€์–ด์š”.

๊ฒฐ๊ตญ ToT๋ฅผ โ€œ์„ฑ๋Šฅ์€ ์ข‹์€๋ฐ ๋น„์‹ผ ๊ธฐ๋ฒ•โ€์—์„œ โ€œํ˜„์‹ค ๋ฐฐ์น˜ ๊ฐ€๋Šฅํ•œ ์ถ”๋ก  ํŒจ๋Ÿฌ๋‹ค์ž„โ€์œผ๋กœ ๋ฐ”๊ฟ€ ์ˆ˜ ์žˆ๋‹ค๋Š” ์‹ ํ˜ธ์˜ˆ์š”.

์ด ๊ธ€์ด ์–ด๋• ๋‚˜์š”?

๊ด€๋ จ ๊ธ€

ํ•ต์‹ฌ์€ ๊ฑฐ๋Œ€ํ•œ ์ฝ”๋“œ๋ฅผ ํ•œ ๋ฒˆ์— ๋‹ค๋ฃจ์ง€ ์•Š๊ณ , factored POMDP๋กœ ์ž‘์—…์„ ์ชผ๊ฐœ์„œ ๊ฐ ๋‹จ๊ณ„๋งˆ๋‹ค ํ•„์š”ํ•œ ์ƒํƒœ ๋ณ€์ˆ˜๋งŒ ๋ณด๊ฒŒ ํ•œ ์ ์ด์—์š”

ํ•ต์‹ฌ์€ ๊ฑฐ๋Œ€ํ•œ ์ฝ”๋“œ๋ฅผ ํ•œ ๋ฒˆ์— ๋‹ค๋ฃจ์ง€ ์•Š๊ณ , factored POMDP๋กœ ์ž‘์—…์„ ์ชผ๊ฐœ์„œ ๊ฐ ๋‹จ๊ณ„๋งˆ๋‹ค ํ•„์š”ํ•œ ์ƒํƒœ ๋ณ€์ˆ˜๋งŒ ๋ณด๊ฒŒ ํ•œ ์ ์ด์—์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”

์ด ๋ฐฉ๋ฒ•์€ ๋งˆ๋ฅด์ฝ”ํ”„ ์ „์ด ๊ธฐ๋ฐ˜์œผ๋กœ ์ถ”๋ก  ํ๋ฆ„์„ ํ™•๋ฅ ์ ์œผ๋กœ ๋ชจ๋ธ๋งํ•˜๊ณ , Causal Delta Feature์™€ Jump Detection์œผ๋กœ ์œ„ํ—˜์ด ๊ธ‰๊ฐ€์†๋˜๋Š” ์ง€์ ์„ ์ฐพ์•„๋‚ด์š”

์ด ๋ฐฉ๋ฒ•์€ ๋งˆ๋ฅด์ฝ”ํ”„ ์ „์ด ๊ธฐ๋ฐ˜์œผ๋กœ ์ถ”๋ก  ํ๋ฆ„์„ ํ™•๋ฅ ์ ์œผ๋กœ ๋ชจ๋ธ๋งํ•˜๊ณ , Causal Delta Feature์™€ Jump Detection์œผ๋กœ ์œ„ํ—˜์ด ๊ธ‰๊ฐ€์†๋˜๋Š” ์ง€์ ์„ ์ฐพ์•„๋‚ด์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”

๊ธฐ์กด LoRA๋Š” ๋žญํฌ๋ฅผ ๋‚ฎ์ถฐ๋„ ๋ ˆ์ด์–ด ํญ์— ๋ฌถ์—ฌ ์ตœ์†Œ ์—…๋ฐ์ดํŠธ๊ฐ€ ํฌ๊ฒŒ ๋‚จ๋Š”๋ฐ, ์˜ˆ์‹œ๋กœ Llama3-8B๋Š” rank 1์—์„œ๋„ ์•ฝ 300๋งŒ ํŒŒ๋ผ๋ฏธํ„ฐ๊ฐ€ ํ•„์š”ํ–ˆ๊ฑฐ๋“ ์š”

๊ธฐ์กด LoRA๋Š” ๋žญํฌ๋ฅผ ๋‚ฎ์ถฐ๋„ ๋ ˆ์ด์–ด ํญ์— ๋ฌถ์—ฌ ์ตœ์†Œ ์—…๋ฐ์ดํŠธ๊ฐ€ ํฌ๊ฒŒ ๋‚จ๋Š”๋ฐ, ์˜ˆ์‹œ๋กœ Llama3-8B๋Š” rank 1์—์„œ๋„ ์•ฝ 300๋งŒ ํŒŒ๋ผ๋ฏธํ„ฐ๊ฐ€ ํ•„์š”ํ–ˆ๊ฑฐ๋“ ์š”.

์žก๋Œ์Œค2๋ถ„ ์†Œ์š”