19장. 복구는 업무 대사로 끝낸다

CPU가 내려가거나 pod가 Running인 것은 복구 증거가 아니다. backlog age, 예약·결제·정산 수량, 중복, 사용자 재시도와 SLO 회복을 확인한다. 임시 완화의 제거 시점도 incident에 포함한다.

손쉽게 따라 하기

복구 query와 대기 queue drain 예상 시간을 정의한다. 입력에는 실제 고객·계정·도메인 대신 tenant-demo, example.invalid와 저장소 fixture만 사용한다. 시작 전 기대 결과와 바꾸지 않을 불변식을 한 줄로 적는다.

같은 화면에서 확인할 증거

lab/public/index.html의 공통 FieldPass Evidence Board에서 책 slug observability-sre-practical, 장 번호 19, run ID를 선택한다. 입력, 판정, 관측값, rollback을 채우고 명령 결과와 같은지 확인한다. 성공 화면만 캡처하지 않고 의도한 실패 하나와 다음 안전 행동을 함께 남긴다.

막혔을 때

트래픽 정상만 선언했다면 손실·중복·지연된 업무를 다시 확인한다. 원인을 확정하기 전 최근 변경, 환경, 권한, 시간 범위와 실제 오류를 고정한다. 외부 서비스를 반복 호출하지 않고 로컬 fixture로 최소 재현한 뒤 한 변수만 바꾼다. 복구는 process 상태가 아니라 FieldPass 예약·결제·정산의 업무 결과로 선언한다.