이구위크 전시 장애 대응기: Redis에는 무슨 일이 있었나

29CM의 이구위크 행사 중 발생한 상품 전시 영역의 장애 대응 경험을 공유하는 글입니다. 블랙프라이데이 기간 동안 급증한 트래픽으로 인해 Netty 이벤트 루프가 포화되고 서버 파드가 다운되는 장애가 발생했습니다.

초기에는 Redis의 시스템 메트릭이 정상으로 보여 원인에서 배제되었으나, 상세 분석 결과 Redis 노드의 네트워크 대역폭 병목 현상이 장애의 근본 원인임이 밝혀졌습니다. 이 글은 장애 발생부터 원인 분석, 그리고 Redis 네트워크 대역폭 이슈를 해결하기까지의 과정을 상세히 다루며, 대규모 트래픽 상황에서의 시스템 안정성 확보 방안에 대한 인사이트를 제공합니다.