뉴스 - 원문 기반 요약 필요

---

title: "GPT·클로드가 실패한 금융 판단력 테스트, 파인튜닝 모델이 역전" description: "뉴스 - 원문 기반 요약 필요" date: 2026-07-04 tags: [ai-news] source: "https://the-decoder.com/gpt-and-claude-failed-bridgewaters-finance-tests-because-the-right-answers-were-never-public/" sidebar: order: 0

제목(한글): GPT·클로드가 실패한 금융 판단력 테스트, 파인튜닝 모델이 역전 원문 제목(영문): GPT and Claude failed Bridgewaters finance tests because the right answers were never public 원문: GPT and Claude failed Bridgewaters finance tests because the right answers were never public 소스: the-decoder MD 파일: content/2026-07-04/the-decoder-gpt-and-claude-failed-bridgewater-039-s-finance-te.md

핵심 내용

브리지워터와 Thinking Machines Lab이 GPT·Claude가 틀린 금융 판단 테스트에서 파인튜닝 모델로 역전했다는 결과를 발표했어요.

프런티어 모델들은 기본 프롬프트로 약 50% 정확도, 전문가가 다듬은 프롬프트로도 70% 중반에 그쳤거든요. 연구팀이 신뢰 가능한 배포 기준으로 잡은 80%에는 못 미쳤어요. GPT 5.4는 5.2 대비 비용이 43% 더 비싸지만 정확도 개선은 미미했고요.

핵심은 투자자의 암묵지였어요. 외부 레이블러가 매긴 데이터로는 한계가 있었고, 모델과 레이블이 불일치한 경우만 투자자가 직접 검토하는 방식으로 데이터 품질을 높였어요.

공개 벤치마크에 없는 답을 맞히려면 결국 도메인 내부 데이터가 필요하다는 걸 다시 확인시켜준 사례예요.

잡돌쌤의 한마디

정답이 한 번도 공개된 적 없는 데이터라, 사전학습 모델이 배울 방법 자체가 없었어요. 도메인 내부 데이터가 성능을 결정한 거예요.

---

출처: GPT and Claude failed Bridgewaters finance tests because the right answers were never public