문제는 환각보다 검증 방식이거든요

AI 코딩 에이전트가 “완료됐어요”라고 말해도, 실제 브랜치에선 빌드조차 안 되는 경우가 많다는 지적이 나왔어요.

문제는 환각보다 검증 방식이거든요. 많은 오케스트레이션 도구가 코드 상태 대신 트랜스크립트 문구(“3개 파일 커밋”, “테스트 통과”)를 패턴 매칭해 완료로 판단해요.

Swarm Orchestrator 4.0은 이걸 바꿔서, 에이전트 단계마다 격리된 git 브랜치에서 git_diff, build_exec, test_exec, file_existence를 직접 실행해요. build/test가 non-zero exit code면 실패로 보고, 트랜스크립트 검증은 required:false 보조 신호로 낮췄어요. package.json, Makefile, pyproject.toml, Cargo.toml 등을 읽어 스택도 자동 감지해요.

결국 핵심은 “에이전트의 말”이 아니라 “실행 결과”로 머지 여부를 결정해야 신뢰 가능한 자동화를 만들 수 있다는 점이에요.