Ingress Nginx Controller의 Prometheus Metric 병목 현상: 원인 분석과 해결 (1부)

카카오 광고 추천팀에서 Ingress Nginx Controller의 Prometheus Metric 병목 현상 발생 원인 분석 및 해결 방법을 다루는 글입니다. 높은 트래픽을 처리하는 광고 API 서버 환경에서 Kubernetes 기반의 Ingress Nginx Controller를 운영 중, Prometheus로 수집되는 Nginx request volume metric이 유실되거나 비정상적으로 낮게 기록되는 문제가 발생했습니다.

이 글은 문제 발생 배경과 원인 분석 과정을 상세히 설명하며, 실제 사례를 통해 Trouble Shooting 과정을 공유합니다. 특히 Ingress Nginx Controller와 Go 프로파일링에 대한 내용을 포함하며, 2부에서는 해결 방법을 제시할 예정입니다.

이 글은 유사한 문제를 겪는 개발자들에게 실질적인 도움을 주는 것을 목표로 합니다.