확인부탁드려요
44
4 asked
대한항공인프런 바꾸신뒤 dbt run 돌리셨을때 (강의영상 30:18) --full-refresh로 돌리셔서 delete+insert가 되었는지 확인이 어려운것 아닐까요?
Answer 1
0
안녕하세요, 인프런 AI 인턴입니다.
id_139님께서 질문 주신 사항은 dbt에서의 --full-refresh 옵션 활용과 관련된 내용입니다.
--full-refresh 옵션에 대한 설명:
- dbt의
--full-refresh옵션을 사용하면 기존 테이블의 데이터를 모두 삭제한 후, 새롭게 데이터를 적재하게 됩니다. 이는 말 그대로 초기화(Fresh Start)를 위한 옵션입니다.
- 따라서, 이 옵션을 사용하면 기존의 데이터 변경 이력을 볼 수 없게 되며, 매번 테이블 전체가 갱신되는 방식으로 작동합니다.
확인이 어려운 이유:
--full-refresh옵션이 활성화된 상태에서 dbt를 실행하면 기존의 데이터가 모두 삭제되면서 새로운 데이터로 업데이트되기 때문에, 변경 전후의 데이터 상태 비교가 불가능해집니다.
- 기본적으로 dbt는 증분 업데이트(Incremental Load)를 지원하기 때문에 데이터 변화 이력을 보존하고 싶다면, 모델 정의에서 증분 방식으로 처리해야 합니다.
더 나아가 강의 중 --full-refresh 옵션의 사용이 언급된 부분과 함께, 표준적인 dbt 운영 방식에 대한 기존 Q&A 예시를 공유해 드리겠습니다:
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
작업형 1 유형 부분
0
9
1
작업형 1 (삭제예정, 구 버전)
0
28
2
수강기간 연장 문의드립니다.
0
20
1
2유형 레이블 인코딩 VS 원핫 인코딩
0
21
3
수강기간 연장 문의드립니다.
0
26
1
인덱스 슬라이싱
0
26
2
astro dev start - python 라이브러리 설치 fail
0
22
1
동기화
0
17
1
8. 4. 클로드 코드로 하는 파일과 폴더 관리
0
24
2
/rewind 시 코드 복구 여부
0
26
1
노션 비즈니스 요금제로 워크페이스 새로 하나 생성해서 수업 따라하면 되는지요?
0
19
0
맥북 환경구성 에러
0
19
2
혹시 강의에 사용된 Agent 소스와 md 파일 구성을 좀 알 수 있을까요?
1
26
2
크렛딧을 구매하라고 하는지 이해가 안가네요?
0
38
2
가상환경 생성 필요한가요?
0
25
1
Free Edition 실습 영상은 아직 업데이트전인가요?
0
22
1
6-7 로그설계하기 연습문제 제출/ 피드백 요청
0
22
2
클로드 Pro 요금제에서 Claude Code CLI 사용을 막는다고 들어서 질문드립니다.
1
41
1
세션의 유입출처를 분석할때 우선순위 관련 문의
0
26
2
클릭 이벤트 - 매개변수 세팅 관련 문의드립니다.
0
26
1
dbt의 한계점
0
83
1
강의 관련 질문
2
88
2
data 라는 폴더가 없습니다.
0
96
1
DW의 star-schema 생성
0
127
1