CI 빌드 오류 원인 분석과 해결 과정

이 게시물은 LINE Plus MPR팀이 겪은 CI/CD 빌드 실패 문제의 원인 분석과 해결 과정을 공유합니다.

CI 시스템 구성 및 도구 소개

• Git, Jenkins, Gradle, Develocity, Elasticsearch, Logstash, Kibana, Grafana를 활용
• 빌드 로그 및 성능 모니터링 체계 구성

문제 발생과 원인 탐색

• 빌드 실패가 타임아웃과 Gradle 데몬 종료로 나타남
• 로그 타임스탬프 불일치와 로그량 급증이 주요 단서
• Logstash의 로그 처리 부하 과다로 인한 지연 현상 확인

해결 방안 및 개선

• Gradle 로그 레벨을 -q 옵션으로 조정해 오류 메시지만 출력
• 빌드 로그 양 감소로 Logstash 부하 완화 및 빌드 시간 단축
• 추가로 빌드 스크립트 수정해 빌드 스캔 정보 유지

문제 재현 및 분석 실험

• 더미 로그 출력과 타임스탬프 실험을 통해 파이프 버퍼 크기와 출력 지연 확인
• 표준 입출력 버퍼로 인한 블로킹 문제 및 로그량 증가 영향 분석

운영 시 고려사항

• 적절한 로그 레벨 설정과 필요 로그만 출력 권장
• 문제 인지 기준 명확화 및 분할 정복식 문제 해결 강조