쿠버네티스 네이티브 워크플로를 이용한 스트리밍 파이프라인 성능 테스트

이 게시물은 LINE 광고 플랫폼의 대용량 데이터 스트리밍 애플리케이션 성능 테스트를 Tekton 기반 쿠버네티스 네이티브 워크플로로 자동화한 사례를 설명합니다.

주요 내용

• Apache Heron 기반 스트리밍 애플리케이션 구조와 튜닝 포인트 소개
• Tekton Pipelines의 Step, Task, Pipeline 개념 및 활용 방법
• PIPE 도구를 이용한 Tekton 클러스터 연동과 GitHub 이벤트 기반 자동 트리거
• 동적 설정 변경으로 빌드 없이 다양한 테스트 변수 적용 가능
• Prometheus와 Slack 연동으로 성능 지표 수집 및 실시간 알림
• 성능 테스트 자동화로 테스트 시간 단축과 리소스 효율 향상
• 실제 테스트 결과를 통해 최적 리소스 조합과 스케일아웃 가능성 확인

적용 효과

기존 일주일 이상 걸리던 성능 검증을 Tekton 워크플로 도입 후 2주 동안 50회 이상 실험 가능해졌으며, 트래픽 증가에 유연하게 대응 가능한 구조를 확보했습니다.