WEBBOOK CHAPTER

Kubernetes, 배포보다 운영이 어렵다: 19장. Cluster 게임데이와 복구 훈련

19장. Cluster 게임데이와 복구 훈련

백업에서 업무 불변식 확인까지 이어지는 클러스터 복구 훈련
백업에서 업무 불변식 확인까지 이어지는 클러스터 복구 훈련

node drain, zone capacity 부족, CoreDNS 지연, ingress config 오류, secret rotation 실패, outbox 적체를 차례로 주입한다. 안전 범위·중단 조건·관측·복구 query를 미리 승인한다.


kubectl auth can-i get secrets --as=system:serviceaccount:fieldpass:api
kubectl rollout status deploy/fieldpass-api --timeout=5m
kubectl rollout undo deploy/fieldpass-api

복구 뒤 예약·결제·정산 수량과 중복을 확인한다. production 실험은 조직의 chaos 정책과 승인 없이 실행하지 않는다.