Claude Code 에이전트가 프롬프트 평가→실패 분류→수정 제안→검증을 끝까지 돌려주는 방식이에요

Cisco AI가 LLM 파이프라인을 자동으로 최적화하는 오픈소스 도구 FAPO를 공개했어요. Claude Code 에이전트가 프롬프트 평가→실패 분류→수정 제안→검증을 끝까지 돌려주는 방식이에요.

성능이 꽤 인상적인데요. 기존 최신 프롬프트 최적화 도구 GEPA와 비교했을 때 18개 벤치마크 중 15개에서 앞섰고, 파이프라인 구조까지 바꾼 케이스에서는 평균 +33.8pp 차이가 났어요.

프롬프트 수정 → 파라미터 조정 → 체인 구조 변경, 이렇게 3단계로 에스컬레이션하면서 실패한 단계를 정확히 짚어준다는 게 핵심이에요. Apache 2.0 라이선스로 GitHub에 공개됐고, Codex도 최적화 에이전트로 쓸 수 있어요.

프롬프트 한 줄 바꿀 때마다 정확도가 20%씩 왔다 갔다 하는 고통, 자동화로 덜어주는 시대가 왔네요.