DIVE๊ฐ ํด ์ฌ์ฉ LLM ํ์ต์์ โ๋ฐ์ดํฐ ์๋ณด๋ค ๋ค์์ฑโ์ด OOD ์ผ๋ฐํ์ ๋ ๊ฐํ๋ค๋ ๊ฑธ ์์น๋ก ๋ณด์ฌ์คฌ์ด์.
ํต์ฌ์ ํฉ์ฑ ์์๋ฅผ ๋ค์ง์ ๊ฑฐ์์. ๋จผ์ ์ค์ ํด์ ์คํํด ์ฆ๊ฑฐ(trace)๋ฅผ ๋ชจ์ผ๊ณ , ๊ทธ ๊ฒฐ๊ณผ๋ก๋ถํฐ ์ฑ๋ฆฝํ๋ ๊ณผ์ ๋ง ์ญ์ผ๋ก ๋ฝ์ ์คํ ๊ฐ๋ฅ์ฑ๊ณผ ๊ฒ์ฆ ๊ฐ๋ฅ์ฑ์ ํ๋ณดํ๊ฑฐ๋ ์.
์ด ๋ฐฉ์์ผ๋ก 5๊ฐ ๋๋ฉ์ธ, 373๊ฐ ํด์ ์ปค๋ฒํ๊ณ , Qwen3-8B๋ฅผ 4.8๋ง SFT์ 3,200 RL ๋ฐ์ดํฐ๋ก ํ์ตํ์ด์. ๊ทธ ๊ฒฐ๊ณผ 9๊ฐ OOD ๋ฒค์น๋งํฌ ํ๊ท +22์ , ๋๊ธ ์ต๊ฐ 8B ๋ฒ ์ด์ค๋ผ์ธ ๋๋น +68์ ์ ๊ธฐ๋กํ์ด์.
์์ฌ์ ์ ๋ถ๋ช ํด์. ์์ด์ ํธ ์ฑ๋ฅ์ ์ฌ๋ฆฌ๋ ค๋ฉด ๋ฐ์ดํฐ๋ฅผ ๋ ๋ชจ์ผ๊ธฐ๋ณด๋ค ํด ์กฐํฉ๊ณผ ์ฌ์ฉ ํจํด์ ๊ตฌ์กฐ์ ๋ค์์ฑ์ ๋จผ์ ์ค๊ณํด์ผ ํ๋ค๋ ๊ฑฐ์์.