누가 Kubernetes 클러스터에 있는 나의 사랑스러운 Prometheus 컨테이너를 죽였나!

이 글은 Kubernetes 클러스터에서 Prometheus 컨테이너가 `CrashLoopBackOff` 상태에 빠진 문제를 해결하는 과정을 공유합니다. 저자는 Prometheus 서버 컨테이너 상태 확인, 컨테이너 런타임 로그 분석, OS 커널 로그 확인 등 문제 해결 단계를 상세히 설명합니다.

특히, 컨테이너 런타임의 OOM Killer 작동으로 인해 Prometheus 프로세스가 종료되었고, 이로 인해 컨테이너가 재시작되는 악순환이 발생했음을 밝혀냅니다. 해결책으로 Prometheus의 메모리 제한을 늘리는 방법을 제시하며, 이를 통해 Kubernetes 환경에서의 모니터링 시스템 안정성 확보와 문제 해결 방법론을 배울 수 있습니다.