inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

File sensor

filesensor가 해당 파일이 있는데 찾지 못하는 경우

114

edu2

작성한 질문수 7

0

안녕하세요, 영상 따라 실습중에 궁금한 점이 있습니다.
filesensor로 확인하려는 파일이 존재하는데도 task가 계속 reschedule되고 있는 원인을 모르겠습니다.😭

image.png

 

image.pngimage.png스크린샷 2025-02-07 오후 4.11.02.png


python 데이터-엔지니어링 airflow

답변 1

1

김현진

안녕하세요 edu2 님

확인해보니 airlfow가 버전 업이 되면서 file sensor 사용법이 조금 달라졌네요.

커넥션 등록할 때 타입을 File(Path)를 선택해보면 Extra 항목이 이제 없습니다.

대신 path라고 하는 명시적인 옵션을 받도록 바꿨어요.

그래서 이제 path에다가 base 경로를 직접 입력해주면 됩니다.

 

As-is: Extra 항목에 {"path":"base경로"} (ex: {"path":"/opt/airflow/files"})

to-be: path 항목에 base경로 직접 입력 (ex: /opt/airflow/files)

 

이렇게 한번 바꿔서 수행해보실래요?

조만간 airflow 강의도 버전 업 되면서 바뀐 부분 업데이트할건데, 해당 부분도 같이 반영하겠습니다.

감사합니다 ^^

새해복 많이 받으세요.

pykrx 회원제 전환으로 인한 실습 불가

0

114

2

수료증 발급

0

84

3

에러 발생 관련 질문드립니다.

0

83

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

69

2

plugins 폴더 생성

0

76

2

WSL에서 git push 가 안되요 ㅠ

0

115

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

67

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

738

2

설치중인데 venv를 꼭 써야할까요?

0

126

2

설치 버전 관련 질문입니다.

0

68

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

62

1

DAG 만들기 중 airflow 패키지 로드 에러

0

106

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

95

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

76

3

email operator 오류 관련

0

66

2

plugins 폴더 관련

0

100

2

bash operator 관련 문의입니다

0

78

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

79

2

Dags refresh 주기 관련 질문

0

125

2

wsl 관련 질문입니다.!

0

75

2

macOS에서 docker 설치

0

94

2

템플릿 변수에 대한 오류

0

61

2

custom_image 디렉토리 문의드립니다.

0

54

2

ETL 인터뷰 관련 문의

0

103

2