DBT, Airflow를 활용한 데이터 계보 중심 파이프라인 만들기
71
AI 요약
이 글은 AI가 원문을 분석하여 핵심 내용을 요약한 것입니다.
DBT, Airflow를 활용한 데이터 계보 중심 파이프라인 만들기
이 게시물은 네이버 ENGINEERING DAY 2025에서 공개된 DBT와 Airflow를 활용한 데이터 계보 중심 파이프라인 구축 사례를 소개합니다.주요 내용
- 과거 데이터 파이프라인 문제점과 사용자 중심 on-demand data lineage 서비스인 Flow.er 개발
- DBT와 Airflow의 역할 및 파이프라인 구성 요소 설명
- Flow.er의 확장과 추가 프로덕트 개발, 파이프라인 개선 사례
- 미래 계획과 MCP 서버 운영 등 향후 방향
대상
- DBT, Airflow를 활용한 데이터 운영과 품질 관리에 관심 있는 데이터 엔지니어
- 과거 데이터 적재 및 파이프라인 복구 작업으로 운영 비용 문제를 겪는 분
