카테고리 없음
dbt ; data build tool - SQL master
bents
2022. 11. 17. 10:10
이것만 기억하자
||
||
||
dbt 도입을 고려하지 않아도 될 때
사내에 SQL을 다루는 인원이 많지 않을때
하둡 기반 데이터 웨어하우스, Spark 기반 데이터 프로세싱이 더 익숙하고 잘 유지가 되고 있을 때
체계적인 메타 정보와 테이블의 관리보다, adhoc 요청을 처리하는 속도가 더 중요할 때
dbt로 ELT 파이프라인 효율적으로 관리하기
배경
www.humphreyahn.dev
https://www.humphreyahn.dev/blog/efficient-elt-pipelines-with-dbt
dbt를 활용하여 데이터 파이프라인을 구축한 사례 참고
Data Engineering: Data warehouse tech stack with Postgres, DBT, and Airflow
Introduction
medium.com