LLM ์์ด์ ํธ๋ ์ญํ ์ ๋ฏธ๋ฆฌ ๋๋ ์ฃผ์ง ์์๋, ์ค์ค๋ก ์กฐ์ง๋ ๋ ์ฑ๋ฅ์ด ๋ ์ข์์ก์ด์.
์ด ์ฐ๊ตฌ๋ 8๊ฐ ๋ชจ๋ธ, 4~256๊ฐ ์์ด์ ํธ, 8๊ฐ ํ์ ํ๋กํ ์ฝ๋ก ์ด 2๋ง5์ฒ ๊ฐ ๊ณผ์ ๋ฅผ ์คํํ์ด์. ์ต์ํ์ ๊ตฌ์กฐ(๊ณ ์ ์์)๋ง ์ค๋ ์์ด์ ํธ๊ฐ ์ญํ ์ ์๋ฐ์ ์ผ๋ก ๋ง๋ค๊ณ , ๋ชปํ๋ ์ผ์ ์ค์ค๋ก ๋น ์ง๋ฉฐ, ์์ ๊ณ์ธต๊น์ง ํ์ฑํ๊ฑฐ๋ ์.
ํนํ ์์จ์ฑ์ ํ์ฉํ Sequential ๋ฐฉ์์ ์ค์์ง์คํ๋ณด๋ค ์ฑ๋ฅ์ด 14% ๋์๊ณ (p<0.001), ํ๋กํ ์ฝ ๊ฐ ํ์ง ๊ฒฉ์ฐจ๋ 44%(Cohenโs d=1.86, p<0.0001)์์ด์. 256๊ฐ๊น์ง ํ์ฅํด๋ ํ์ง ์ ํ๊ฐ ์์๊ณ (p=0.61), 8๋ช ํ์์๋ง 5,006๊ฐ ๊ณ ์ ์ญํ ์ด ๋์์ด์.
์คํ์์ค ๋ชจ๋ธ๋ ํด๋ก์ฆ๋ ๋๋น ํ์ง 95%๋ฅผ 24๋ฐฐ ๋ฎ์ ๋น์ฉ์ผ๋ก ๋ฌ์ฑํ์ด์. ๊ฒฐ๊ตญ ์์ด์ ํธ ์ค๊ณ์ ํต์ฌ์ โ์ง์ฑ ๋ฐฐ๋ถโ๋ณด๋ค โ๋ชฉํยทํ๋กํ ์ฝยท๋ชจ๋ธ ์ญ๋โ์ด๋ผ๋ ์์ฌ์ ์ด์์.