dbt1 dbt ; data build tool - SQL master 이것만 기억하자 || || || dbt 도입을 고려하지 않아도 될 때 사내에 SQL을 다루는 인원이 많지 않을때 하둡 기반 데이터 웨어하우스, Spark 기반 데이터 프로세싱이 더 익숙하고 잘 유지가 되고 있을 때 체계적인 메타 정보와 테이블의 관리보다, adhoc 요청을 처리하는 속도가 더 중요할 때 dbt로 ELT 파이프라인 효율적으로 관리하기 배경 www.humphreyahn.dev https://www.humphreyahn.dev/blog/efficient-elt-pipelines-with-dbt dbt를 활용하여 데이터 파이프라인을 구축한 사례 참고 https://medium.com/@henokdes1/data-engineering-data-warehouse-tech-stack-with-post.. 2022. 11. 17. 이전 1 다음