디프로모션의 DynamoDB, zero-ETL, ElastiCache Serverless 도입기

이 게시물은 디프로모션 서비스가 급격한 성장과 다양한 요구를 충족하기 위해 AWS 기반 데이터베이스 및 캐시 솔루션을 도입한 과정을 설명합니다.

초기 구조와 한계

• MemoryDB for Redis, OpenSearch, S3+CloudFront를 활용한 데이터 처리 및 정적 자원 관리
• 트래픽 급증과 비용 증가 문제, 운영 복잡성 발생

DynamoDB 및 zero-ETL 파이프라인 도입

• 탄력적 확장성과 일관된 성능 제공
• 온디맨드와 프로비저닝 모드 혼합 운영으로 비용과 운영 효율 균형
• DynamoDB Streams와 PITR을 활용한 OpenSearch와 실시간 데이터 동기화

ElastiCache Serverless 도입과 효과

• 자동 확장과 낮은 운영 부담으로 캐싱 성능 극대화
• 레이턴시 최대 87% 감소, DynamoDB 비용 절감, 운영 효율성 향상

마무리 및 향후 과제

• 기술 스택의 최적 조합을 통한 지속적 서비스 개선
• 캐시 전략 확장, NoSQL 쿼리 최적화, 자동화 파이프라인 구축 계획