DBT, Airflow를 활용한 데이터 계보 중심 파이프라인 만들기

er를 개발하고 발전시킨 경험을 공유합니다. 과거 데이터 파이프라인의 문제점을 해결하고 사용자 중심의 서비스를 구축하기 위해 DBT와 Airflow를 어떻게 활용했는지, 그리고 데이터 파이프라인 플랫폼으로서 확장성을 고려한 개발 컴포넌트들을 소개합니다.

특히, DBT의 역할, Airflow의 역할, CI/CD 파이프라인 구축, 그리고 Playground, Tower 등의 추가 프로덕트 개발 및 개선 과정을 상세히 다룹니다. 이 내용은 DBT, Airflow를 활용해 고품질 데이터 프로덕트를 운영하거나 데이터 엔지니어링 파이프라인 구축 및 개선에 관심 있는 개발자들에게 유용한 정보를 제공합니다.

다룹니다. 이 내용은 DBT, Airflow를 활용해 고품질 데이터 프로덕트를 운영하거나 데이터 엔지니어링 파이프라인 구축 및 개선에 관심 있는 개발자들에게 유용한 정보를 제공합니다.