프리즘(Prism) 소개

이 게시물은 매드업의 데이터 관리 플랫폼인 프리즘에 대해 소개합니다.
프리즘은 광고 데이터를 수집, 가공, 적재, 공급하는 전체 파이프라인을 갖추고 있으며, AWS S3에 데이터를 저장하고 Redshift에 로드하여 분석합니다.

프리즘의 아키텍처

• Python으로 작성된 데이터 수집기로 Google, Facebook 등 다양한 광고 매체의 데이터를 수집
• Apache Airflow를 사용하여 데이터 처리 과정을 자동화
• 프리즘 V2에서는 비동기 방식으로 개선하여 성능을 향상시킴

미래의 방향

프리즘은 광고 데이터의 신선도를 유지하면서, 데이터 소비를 개선하고 다양한 분석 도구와의 통합을 통해 더욱 발전할 계획입니다.