RabbitMQ Classic Queue 메모리 장애와 Quorum Queue 전환기

이 게시물은 1,500만 건 대량 쿠폰 발급 중 발생한 RabbitMQ 메모리 과다 점유 문제와 Classic Mirrored Queue의 구조적 한계를 해결하기 위한 Quorum Queue 전환 과정을 다룹니다.

장애 발생과 대응 과정

• 메모리 부족으로 인한 브로커 동기화 실패 및 메시지 처리 중단
• 긴급 대응으로 신규 브로커 독립 운영 및 점진적 트래픽 전환
• 운영 환경과 동일 조건 개발 환경에서 문제 재현 및 원인 분석

구조적 한계와 해결책

• Classic Mirrored Queue의 메모리 기반 동기화 실패 위험과 재시작 시 문제 악화
• AWS TAM과 협업해 RabbitMQ 버전 업그레이드 및 Quorum Queue 전환 권고
• Quorum Queue의 Raft consensus 기반 안정성과 자동 복구 기능 도입

전환 후 성과 및 운영 개선

• 장애 발생 0회, 메시지 처리 지연 20% 단축, 메모리 알람 0건
• CloudWatch 기반 모니터링 및 자동 알림 체계 구축
• 향후 이중화 구성, 자동 장애 복구, 로드맵 기반 메시징 시스템 고도화 계획