WEBBOOK CHAPTER

Codex로 구축하는 AI 개발팀: 3장 해설

3장 해설

1. 성공률 분모

실행 성공률은 성공 run/전체 run, 작업 완료율은 완료 task/전체 task입니다. 제시된 값만으로 30%가 어느 정의인지 모릅니다. 취소·의도된 차단 포함 여부와 관찰 기간도 필요합니다.

2. 균형 계기판

예: 흐름=검증 완료 리드 타임, 품질=유출 결함 심각도, 사람=작업당 개입 분, 비용=성공 작업당 모델/CI 자원. 생성 줄 수는 보조 활동 지표로만 둡니다.

3. 난이도 편향 태그

예상 파일/모듈 수, 공개 계약 여부, 외부 시스템, 명세 완전성, 테스트 준비도, 데이터·권한 위험, 신규 설계 판단을 사용합니다. 도입 전후의 같은 태그 층에서 비교합니다.

4. 실패 분류

좋은 분류는 원인과 다음 행동을 연결합니다. 예를 들어 SPEC_MISSING은 제품 소유자, TEST_FLAKE는 테스트 소유자, TOOL_TRANSIENT는 제한 재시도, POLICY_VIOLATION은 재시도 중단과 보안 검토로 라우팅됩니다.