IL-0006 Neon · 2025-05-16kubernetesaws
그 리전의 서브넷은 다른 곳의 절반 크기였고 성장이 한계를 밀어붙였어요. VPC CNI 가 파드를 더 받을 수 없는 노드에도 주소를 많이 쥐고 있어서 풀이 실제보다 비어 보였어요. 웜 풀 설정을 바꾸자 처음엔 나아졌지만, 문서의 기본값을 잘못 읽어서 파드를 지울 때마다 시작이 멈췄어요. 반납된 주소가 대기 시간에 묶인 채 목표치에 포함됐기 때문이에요. 웜 목표를 0 으로 두자 클러스터가 안정됐고, 며칠 뒤 변경을 되돌리자 장애가 재현됐어요. 컨트롤 플레인 작업을 고치는 동안 미리 만들어 둔 컴퓨트 풀을 키워 남은 오류를 가렸어요.
새 컴퓨트 파드가 스케줄은 됐는데 IP 할당 오류로 시작하지 못했어요. 서브넷은 다 찬 것처럼 보이는데 쓰이지 않는 주소가 많아 보였고, 쉬고 있던 고객 데이터베이스를 깨울 수 없었어요.
증상 ? 파드 PendingIP 주소 고갈
원인 ? 용량 한계
메트릭과 로그에서 IP 할당 오류와 떨어지는 파드 시작률이 보였어요.
기본값과 문서는 실제 파드 생성 삭제 부하에서 확인해야 해요. 되돌린다고 건강한 상태로 돌아오는 건 아니에요. 부하 테스트에서 나온 용량 가정은 성장이 앞지르면 깨져요.