Amazon S3 Tables 개요

이 게시물은 2024년 AWS re:Invent에서 공개된 Amazon S3 Tables의 기능과 개발팀 인터뷰를 통해 미공개 정보를 포함한 상세 내용을 소개합니다.

주요 특징

• 기존 S3 대비 최대 3배 빠른 쿼리 성능 및 10배 높은 트랜잭션 처리량 제공
• Apache Iceberg 포맷 지원으로 다양한 쿼리 엔진과 호환성 강화
• 자동 테이블 유지 관리, 스냅샷 관리, 불필요 파일 제거 기능 포함
• 현재 미국 3개 리전에서만 사용 가능하며, 글로벌 확장 및 추가 기능 개발 중
• 비용 효율성은 최대 30% 절감 가능하나, 실제 비용 차이는 사용 환경에 따라 다름

개발팀 인터뷰 내용

• S3 Intelligent Tiering과 유사한 모니터링 기반 기술 적용
• Iceberg 메타데이터를 기준으로 객체를 관리
• AWS Glue Catalog와의 완전한 통합은 현재 프리뷰 단계
• API 및 Python 라이브러리 제공 예정