Gemini 기반 테스트 케이스 자동화 실패와 성공기

본 글은 Gemini와 같은 LLM을 활용하여 테스트 케이스(TC) 작성 업무를 자동화하려는 시도의 경험을 공유합니다. QA 엔지니어에게 TC 작성은 필수적이지만 많은 시간과 리소스가 소모되는 작업입니다.

이에 팀은 AI를 통해 이 과정을 효율화하고 확보된 시간을 다른 생산적인 업무에 투자하고자 했습니다. 초기 스터디 단계에서는 비교적 단순한 과제에 대해 Gemini에게 TC 설계를 요청하여 실무 적용 가능성을 확인했습니다.

다양한 프롬프트 접근 방식을 시도한 결과, 20~38건의 유의미한 TC를 도출하며 가능성을 발견했습니다. 그러나 더 복잡한 실제 과제에 적용하려 했을 때 예상치 못한 난관에 봉착하며 실패를 경험했습니다.

이 글은 이러한 실패와 성공 경험을 통해 AI 기반 TC 자동화의 현실적인 어려움과 개선 방향을 탐색합니다.