DynamoDB 도입을 통한 대용량 데이터 처리 혁신

이 게시물은 삼쩜삼이 월 수억 건의 대용량 데이터를 효율적으로 처리하기 위해 관계형 데이터베이스 대신 Amazon DynamoDB를 도입한 경험을 다룹니다.

외부 연계 데이터 저장 구조 개선

• 대용량 JSON 데이터를 DynamoDB와 S3로 분리 저장하여 성능 저하와 비용 문제 해결
• DynamoDB의 용량 제한과 비용 효율성을 고려해 메타 정보는 DynamoDB에, 요청/응답 JSON은 S3에 저장

사용자 알림 수신동의 서비스 개선

• 읽기 중심 데이터에 적합한 DynamoDB 선택으로 빠른 조회와 확장성 확보
• API 호출과 데이터 동기화 방식의 한계를 극복하며 운영 효율성 및 비용 최적화 달성

운영 및 안정성 확보 전략

• 트래픽 급증 대비 Warm Throughput 사전 예열
• GSI를 활용한 백오피스 효율화 및 희소 인덱스 적용
• 쓰기 직후 읽기 안정성 확보를 위한 방어 로직 구현

결론

관계형 데이터베이스가 유일한 선택지가 아니며, 상황에 맞는 NoSQL 솔루션 도입으로 안정적이고 확장 가능한 서비스를 구현할 수 있음을 확인하였습니다.