테스트를 더 쓰기 전에, 어디에 쓸지부터: 동적 필터 ATDD 실험기
Summary
버그 제로의 비결! QA 테스트 케이스를 '시험지'로 삼는 ATDD 도전기
여기어때가 다중 카테고리와 동적 필터 개발 과정에서 TDD와 ATDD 이중 루프로 QA 첫 패스율 95%를 달성한 생생한 여정
개발이 끝난 뒤에야 버그를 잡는 사후 약방문식 개발에서 벗어나기 위해, QA의 테스트 케이스를 개발 전 명세서로 활용하는 ATDD 실험을 진행했습니다. TDD의 안쪽 루프와 ATDD의 바깥 루프를 조화롭게 구동하고 AI 에이전트를 검증 파트너로 활용하여 단순한 테스트 코드 작성을 넘어 품질 향상을 위한 실질적인 오답 노트를 확보했습니다. 본 아티클은 전면 도입 대신 스마트하게 선택하고 집중하는 실무 중심의 테스트 전략을 제시합니다.
- 01QA 시작 전에 기획 충돌 및 스펙 오류 등 17건의 결함을 선제적으로 차단
- 02첫 QA 검증에서 테스트 케이스 통과율 95% 및 프로덕션 배포 후 결함 0건 달성
- 03AI 에이전트와의 스마트한 협업으로 197건의 대규모 테스트 코드 변환 리소스 최적화
- 04결함 영역 분석을 통해 고정 영역과 변동 영역을 구분하는 하이브리드 적용 전략 도출
- 05API 정합성 상시 감시 및 릴리스 체크리스트 등 실무적인 액션 플랜 제시
RECOMMENDATION
잦은 요구사항 변경으로 테스트 유지보수 비용에 지친 개발자나, QA 기간에 쏟아지는 결함 티켓의 병목을 줄이고 품질을 데이터 기반으로 예측하고 싶은 개발 팀에게 적극 추천합니다.
The Problem
복잡한 다중 카테고리 및 동적 검색 필터 기능을 개발하는 과정에서 기획의 모호함과 개발 후반부 QA 기간에 결함이 집중되는 병목 현상이 발생하여 일정 지연과 품질 저하의 우려가 있었습니다.
The Solution
개발 시작 전 QA 조직으로부터 테스트 케이스를 미리 받아 수용 기준으로 삼고, AI 에이전트와 협업하여 이를 자동화 테스트 코드로 변환 및 실행하는 이중 루프 프로세스를 도입했습니다.
The Result
QA 시작 전에 17건의 잠재 결함을 선제적으로 해결하였으며, 본 QA 첫 실행 시 95%의 성공률을 기록하고 출시 후 결함 발생 건수 0건을 달성했습니다.
Trade-off
기획이 계속 변하는 영역에서는 테스트 코드 재작업 비용이 급격히 증가하며, 프론트엔드 단독 테스트 환경 특성상 실제 백엔드 API 간의 데이터 정합성 오류를 완벽하게 잡아내기는 어렵습니다.
Key Concepts
More from 여기어때
View all posts from 여기어때EKS 컨테이너 메모리 스파이크 추적기
EKSPage CacheLogback4일 전SRE 업무에 AI 녹여내기 — 2편: Alert Adviser로 장애 원인 분석 자동화
GrafanaMCPSlack Bot1주 전SRE 업무에 AI 녹여내기 — 1편: Smart RI Calc로 인프라 비용 산정 자동화
SREAWS KarpenterCost Estimation1주 전WebFlux 전환 부하 테스트를 다시 쓴 이야기
WebFluxSpring BootLoad Testing1주 전데드락을 해결하려다, 락을 줄이게 된 이야기
MySQL InnoDBDeadlockPessimistic Lock1주 전