SK 플래닛의 데이터 리드 타임 단축 프로젝트

이 게시물은 SK 플래닛의 빅데이터 플랫폼인 DIC에서 실시간 데이터 전달을 강화하기 위한 과제를 다룹니다.

주요 내용

• 스트림 데이터 실시간 처리 및 오픈소스 Trino 활용
• Hadoop 클러스터와 Kafka를 통한 데이터 통합
• Data Mesh 및 Data Fabric 개념을 통한 아키텍처 발전

효과

Trino 도입으로 데이터 분석 환경이 개선되었으며, 실시간 데이터 조회 및 분석이 가능해졌습니다.