본문 바로가기
카테고리 없음

dbt ; data build tool - SQL master

by bents 2022. 11. 17.

이것만 기억하자

||

||

||

dbt 도입을 고려하지 않아도 될 때

사내에 SQL을 다루는 인원이 많지 않을때
하둡 기반 데이터 웨어하우스, Spark 기반 데이터 프로세싱이 더 익숙하고 잘 유지가 되고 있을 때
체계적인 메타 정보와 테이블의 관리보다, adhoc 요청을 처리하는 속도가 더 중요할 때

 

 

dbt로 ELT 파이프라인 효율적으로 관리하기

배경

www.humphreyahn.dev

https://www.humphreyahn.dev/blog/efficient-elt-pipelines-with-dbt

dbt를 활용하여 데이터 파이프라인을 구축한 사례 참고

https://medium.com/@henokdes1/data-engineering-data-warehouse-tech-stack-with-postgres-dbt-and-airflow-ea8bd3d9d932

 

Data Engineering: Data warehouse tech stack with Postgres, DBT, and Airflow

Introduction

medium.com