33장. AI 성능 분석의 검증

AI가 log·trace·plan을 요약해도 원본 시간 범위, 단위, sampling, environment를 사람이 확인한다. 상관관계를 원인으로 단정하거나 평균과 percentile을 섞고 다른 version을 비교하는 오류를 찾는다. 추천 설정은 한 변수 실험과 rollback을 거친다.

운영 trace·profile은 외부 모델 전송 전에 데이터 등급과 조직 승인을 확인한다. 합성 fixture와 로컬 도구를 우선한다. AI 분석은 가설과 다음 측정을 만드는 데 사용하고 용량 구매·SLO 변경은 책임자가 승인한다.