inflearn logo
강의

講義

知識共有

Airflow完全ガイド - Part 1

BashOperatorタスク使用時におけるShellの明確なExit戻り値設定の必要性

강사님의 로그포맷과 저의 로그포맷이 차이가 있는것 같습니다.

184

sdlee

投稿した質問数 1

0

강사님 로그 포맷

image.png

저의 로그포맷

image.png

어떤 부분을 수정해야 할까요?

데이터-엔지니어링 airflow orchestration

回答 3

0

sdlee

문제를 찾았습니다.

image.png

UI 로그 설정 - "소스숨기기" 를 선택했었네요

-_- 소스가 그 "소스"인줄 몰랐네요

 

감사합니다. !!!!

0

dooleyz3525

해결이 되었다니 다행이군요 ^^

그리고,

강의를 잘듣고 계시는것 같은데, 평점을 별 3개로 주신 이유를 물어도 될까요?

0

sdlee

평점이 별 3개이었나요 + +

습관적으로 눌렀나 보네요 (수정할게요)

정말 강의 잘 듣고 있습니다.

(카프카 강의도 완강했습니다 ^^)

0

dooleyz3525

오, 그러셨군요. 다행입니다.

제 카프카 강의도 수강해 주셔서 감사합니다.

0

dooleyz3525

평점이 아직 그대로 군요. 잘 듣고 계시다면, 평점 수정 부탁드립니다.

0

sdlee

^^ 수정했습니다. 평점

0

sdlee

airflow.cfg 파일의 설정 값입니다.

image.png

 

0

dooleyz3525

네, 이렇게 설정되면 source, loc가 출력되어야 합니다만,

특별히 실습환경을 변경하지 않았다면, 안되는 이유는 저도 모르겠습니다.

source, loc 출력의 여부가 airflow를 이해하는데 필요한 부분은 아닙니다만,

꼭 보고 싶으시다면, 섹션 1의 마지막쯤 공지 영상 참조하셔서 container, image, volume 다 삭제하시고, astro도 강의 실습과 동일한 버전 설치하셨는지, 다시 확인하신 다음에 재 설치하고 결과를 보시는 수밖에 없을 것 같습니다.

0

dooleyz3525

말씀하신 로그 포맷의 차이가 어떤 건가요? 화면만 봐서는 모르겠군요.

제가 강의 영상을 녹화한 시점이랑 지금 학습하시는 시간이 다르기 때문에 로그가 다르게 나오는 부분이 있습니다만, 어떤 문맥적인 부분을 말씀하시는지 잘 모르겠습니다.

제가 강의 영상에서 설명드리는 부분이랑, 실습 하실 때 나오는 로그 메시지가 뭔가 논리가 안맞는 부분이 있으면 기재 부탁드립니다.

 

0

sdlee

강사님 로그

image.png

저의 로그

image.png

 

 

0

dooleyz3525

source는 로그를 생성한 airflow 모듈명, loc는 해당 모듈 소스코드에서 log를 호출한 라인을 의미합니다.

아마 특정 파라미터를 변경하지 않고, 강의 실습 환경 그대로 astro를 설치해서 사용하고 계시면, 강의 영상대로 source와 loc가 나올 겁니다.


만약 아무것도 변경하시지 않고, 강의 실습 환경 그대로 진행했는데도 source와 loc가 안나온다면

scheduler container의 airflow.cfg 파일에서 callsite_parameters 값이 어떻게 되어있는지 확인 부탁드립니다.

server01.hadoop.com 로그인 정보 문의드립니다.

0

22

1

실전문제 5회차 25번 문제

1

44

1

실전모의고사 5회차 15번

0

46

1

실전모의고사 5회차 11번, 13번

0

40

1

전체 과정에 대한 질문입니다.

1

51

1

스노우플레이크 수업 적재에 사용하는 csv 파일 존재 여부. 그리고 실습 코딩의 답안은

0

35

1

엔비디아, 테슬라, 등등 최근에 많이 오른 주식들 accuracy이슈

1

65

2

밴티지api 막혀서 공매도 잔고설정 으로 다시 로직 설정한 강의에 대해서.

1

71

1

run.py 실행하니 아예 전체다 돌아가요 코드가

1

56

2

run.py 실행시키면, 자동으로 바로 경제 지표 데이터를 수집해요

1

53

2

dbt variable을 활용한 incremental 모델 생성 후 다른 실습 진행 시 문제

0

54

0

Spark 3.5에서 pandas의 NaN이 NULL로 바뀌지 않을 때

0

68

1

경쟁상태

0

74

1

stmt

0

63

1

Kafka 4.0 zk 코드 제거 가이드 요청

0

64

2

19강 감정분석 강의처럼 api 돌렸는데

1

96

1

누락된 소스코드가 있는 것 같아서 공유합니다.

0

90

1

astro dev start 시 오류 발생

0

108

2

postgres-1에 minio에서쓸 meta data 속성이 왜저장되나요?

0

77

1

astro dev init 에 Dockerfile 버전 고정 방법 문의

0

129

2

astro dev start - python 라이브러리 설치 fail

0

175

1

astro project 실무 적용 질문

0

126

1

7 강에서 astro dev start를 하는데, localhosst8080화면이 안뜹니다

0

174

2

astro dev start에서 building 시간이 깁니다.

0

168

2