inflearn logo
강의

Course

Instructor

dbt, The New Standard of Data Analytics Engineering

DW의 star-schema 생성

146

teohus

6 asked

0

(질문전 반드시 AI-assitant와 먼저 해결해보세요!)

1. 이 문제를 해결해보기 위해 어떤 시도를 해보셨나요?

2. 질문 내용만 보았을 때, 답변자가 질문의 의도를 쉽게 이해할 수 있는 컨텍스트가 다 들어있나요? (영상 xx:yy ~ zz:aa 부분, 시도해본 작동하는 전체 코드 등)

 

안녕하세요! dbt 강의 너무 재미있게 공부하고있습니다.

미국에서 공부하고 있어 dbt가 얼마나 강력하고 많은 곳에서 원하는지 몸으로 체감하고 있습니다.

혹시 궁금한 부분이 기존 ETL의 경우 Transform단에서는 데이터 전처리, 타입 변환 등이 수행되고 DW staging db 단에 load 된 후에 여기서 table간의 조인 등의 처리로 Star-schema (Fact, dimension tables) 이 개발되는 것으로 알고 있습니다.

dbt의 경우 말씀해주신대로 ELT 방식으로 DW로 load된 후에 Transform되는 방식인데요.

dbt가 그럼 Star-schema (Fact, dimension tables) 개발를 개발하는 단계에도 관여를 하는 걸로 이해하면될까요? (e.g. BIgQuery에서 개발되는 것이 아닌 dbt 상에서 개발하게 되는지)

답변 주시면 감사하겠습니다!

빅데이터 업무-생산성 데이터-엔지니어링 dbt 데이터-리터러시

Answer 1

1

DeepingSauce

네, 이게 팀이나 사용방식에 따라 차이가 있겠지만, 저 같은 경우는 dbt 를 이용해서 modeling 까지 가미해서 warehouse를 구축합니다. 실제 source로 등록되는 데이터들이 f/d 형태의 데이터가 아닌, 실제 서비스 운영에 특화된 데이터 포멧이라, dbt를 이용해서 f/d 모델링은 높은 확률로 다 하게되는 것 같아요

RandomForest vs lgb

0

4

1

21c 버전으로 해도 무방한가요?

0

2

2

전처리 관련질문

0

6

2

작업형3 기출

0

6

1

유형2에서 데이터분할 생략 가능여부

0

9

1

9회 기출 유형3 질문

0

8

1

lgb 기초편

0

5

1

괄호 사용

0

10

1

수업노트는 어디서 볼 수 있나요?

0

14

2

작업형 2 데이터 전처리 질문

0

10

0

11회 기출 유형 작업형1 문제 3-1

0

9

0

예시문제 작업형2 (ver2023) 질문입니다

0

12

1

Data type에 따른 처리

0

8

1

데이터 전처리 관련

0

14

2

시험에서 문제 불러오기

0

12

2

2번문제 출력값 질문

0

17

2

pd.get_dummies()가 bool로 반환

0

16

2

대응표본검정 레빈

0

20

3

단일표본검정 문제 유형

0

22

2

[작업형 3] 6~7. 카이제곱 검정

0

18

2

확인부탁드려요

0

56

1

dbt의 한계점

0

102

1

강의 관련 질문

2

107

2

data 라는 폴더가 없습니다.

0

110

1