AI로 E2E 테스트를 찍어내다: MAFT

MAFT(Multi Agents For Testing)는 LLM 기반 에이전트를 활용하여 E2E(End-to-End) 테스트 코드 생성을 자동화하는 사이드 프로젝트입니다. API 문서만 있으면 테스트 코드를 생성하고 PR까지 자동으로 생성하는 것을 목표로 합니다.

네이버 메일, 메시지 검색 서비스 등에 사용되는 검색 엔진 Noir의 E2E 테스트 구축을 위해 시작되었으며, API 1개당 평균 10개 이상의 테스트 케이스를 생성하고 2개 이상의 버그를 찾는 성과를 보였습니다. MAFT는 API 간 의존 관계를 파악하고 이에 대응하는 테스트 케이스를 생성하여 개발자의 비효율적인 테스트 작성 작업을 줄여줍니다.

본 글에서는 MAFT 개발 경험과 현재 한계점을 공유하며, LLM API를 활용한 애플리케이션 개발에 대한 인사이트를 제공합니다.