세금 환급 자동화 : AI-driven UI 테스트 자동화 일지

토스인컴의 복잡한 세금 환급 서비스 QA를 위해 AI를 활용한 테스트 자동화 실험을 진행한 경험을 공유합니다. 기존 E2E 테스트 방식은 높은 개발 시간과 유지보수 비용, 잦은 UI/정책 변경, 불안정한 외부 시스템 연동으로 인해 비효율적이었습니다.

이에 QA가 코드를 거의 작성하지 않고 AI 팀원과 협력하여 자동화 시스템을 구축하는 방안을 모색했습니다. 5개월간의 실험 결과, AI 3명과 사람 1명이 협력하여 4~5명 규모의 자동화 팀이 낼 수 있는 성과를 달성했습니다.

이 글은 AI를 활용한 테스트 자동화의 가능성과 실제 적용 사례를 보여주며, 특히 복잡하고 변화가 잦은 서비스 환경에서의 AI 역할에 대해 논합니다.