WEBBOOK CHAPTER

Kubernetes, 배포보다 운영이 어렵다: 33장. 운영 당번 한 장 카드

33장. 운영 당번 한 장 카드

장애 때 순서는 사용자 영향·최근 변경·rollout·pod 상태·network·dependency·data다. 명령 출력 하나로 결론내리지 않고 SLO와 업무 결과를 연결한다. 완화 전 현재 digest·revision·config를 고정하고 rollback·traffic 제한·degrade 중 되돌리기 쉬운 행동을 고른다.

복구 뒤 rollout green, 예약 중복 0, queue age 정상, 대사 차이 0, alert 회복을 확인한다. 수동 변경은 사건 ID와 만료를 붙여 Git으로 회수한다. 카드에는 실제 secret·개인정보·장기 token을 넣지 않는다. 새 당번이 staging 훈련에서 이 카드만으로 같은 증거를 모을 수 있어야 한다.