QA 자동화 결과를 데이터로 관리하다: Grafana Dashboard와 Weekly 분석의 힘
기타
QA 자동화 결과를 데이터로 관리하다: Grafana Dashboard와 Weekly 분석의 힘
두줄요약
QA 자동화 결과를 DB와 Grafana로 관리하며 Fail 원인을 주간 단위로 분석하고 개선했습니다. 협업과 일정 관리를 더해 3Q 목표였던 Fail률 0.7% 미만을 달성했습니다.
핵심 내용
- QA 자동화 결과를 DB에 적재하고 Grafana Dashboard로 시각화해 Fail률과 수행 시간을 데이터로 관리하는 방법
- 주간 분석을 통해 시나리오별 Fail 원인을 찾고, 사전 로그인·스크롤 안정화·PIP 닫기·A/B 분기·패싯 조건 강화 등으로 개선
- 모바일 개발팀과 위클리 협업, 원인 공유, 일정 관리까지 결합해 3Q 목표였던 Fail률 0.7% 미만 달성
- 수행 시간 분석으로 스케줄링 주기 초과와 장애 탐지 지연을 방지하고, 이후 AI 기반 주/월 단위 자동 분석도 준비 중