29CM QA팀은 어떻게 테스트 자동화 지표를 활용하여 신뢰성을 확보할 수 있었을까?

29CM QA팀은 앱 테스트 자동화의 신뢰성 하락 문제를 해결하기 위해 테스트 자동화 지표를 활용하는 방안을 모색했습니다. 앱은 UI/UX 변동이 잦아 테스트 자동화 실패율이 높았고, 이는 테스트 결과의 신뢰성을 떨어뜨리는 주요 원인이었습니다.

이 문제를 해결하기 위해 2분기 OKR로 설정하고, Postgresql과 Grafana를 활용하여 데이터를 시각화하고 지표를 추적하는 시스템을 구축했습니다. 이를 통해 테스트 자동화의 정확도를 높이고 전반적인 서비스 신뢰성을 확보하는 데 기여했습니다.

이 글은 QA팀이 실제 데이터를 기반으로 문제점을 진단하고 개선해나가는 과정을 공유합니다.