검색 모니터링 시스템 구축

다양한 검색 관련 서비스(검색API, 검색엔진, 동적색인 등)의 상태와 통계 데이터를 한눈에 파악하고 추이를 분석하기 위한 검색 모니터링 시스템 구축 과정을 설명합니다. 기존에는 각 서비스별 모니터링 툴을 사용하고 데이터를 수동으로 처리해야 하는 불편함이 있었습니다.

이를 개선하기 위해 Golang으로 로그 스크랩 API를 개발하여 실시간 로그를 수집 및 가공하고, InfluxDB에 시계열 데이터를 저장하며, Grafana를 이용해 시각화하는 시스템을 구축했습니다. 이를 통해 색인된 상품 수, 동적색인 소요 시간, 검색량, 검색 속도 등 다양한 지표를 분, 시간, 일 단위로 모니터링할 수 있게 되었습니다.