본문 바로가기

GrowthHack/BigQuery8

스타트업 - 빅쿼리 데이터관리방법 2021. 3. 17.
스타트업 - DW 구조 설계(수집/관리) Firebase(수집)+BigQuery(관리) Ops 최적화 - Firebase 요금제 : Spark (무료) , Blaze (유료) - Firebase (수집)+ BigQuery(저장)로 DW 구축 하기 1) 테이블 관리하려면 적합한 테이블 형태로 변환해야 ( how ) 2) 일정 기간이후 아카이브하기 출처 : 하이퍼커넥트 기술블로그hyperconnect.github.io/2020/11/12/bigquery-optimization.html 2021. 3. 13.
스타트업 - DW사전작업 ; ERD 자동생성(Reverse Engineering) 대부분의 스타트업은 제대로된 ERD가 정리되어 있지 않다.서비스 로그를 파악하려면, 당연히 ERD가 있어야 한다. 하나씩 DB보고 정리하는게 얼마나 귀찮은 일인가..그러니 자동생성기능을 통해 DB를 빠르게 이해하자! 프로그램설치하면 한방에 끝남 ㅎ무료/유료 서비스가 있음 [ 프로그램 리스트 링크] 윈도우 : Erwin (무료?) [설명 링크]맥 : DBeaver (무료) [설치 링크] DBeaver 설치/사용법 [링크] 2021. 3. 12.
스타트업 - DW 구축 / 로그설계 다양한 데이터 스토리지가 존재한다. 1. 다양한 데이터 - 1st Party data [링크]: 기업 내부 데이터 = CRM 데이터 = 서비스로그(고객관리정보) + 행동로그(웹/앱 트랙킹 정보) - 2nd Party data : 타사 내부 데이터. ~= 광고 플랫폼 데이터 ; 페이스북, 구글, 카카오, 네이버 - 3rd Party data: 데이터 수집/가공 전문기업;DMP의 데이터 ; 오라클의 Bluekai,Adobe Audience Manager, Salesforce, Lotame DMP 2. 다양한 데이터 저장소; 데이터 레이크, 데이터 마트, 데이터 베이스, 데이터 웨어하우스 용어 참 많다.; 통합해서 데이터 저장소(원본)라고 통칭- RDBMS(정형데이터), MongoDB(비정형데이터), BigQ.. 2021. 3. 4.

티스토리툴바