inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

외부 파이썬 함수 수행하기

섹션3-2 외부 파이썬 함수 수행하기 에러코드 질문드립니다.

257

이정민

작성한 질문수 5

0

아래와 같은 에러가 발생했는데, common 파일을 못찾는 것 같습니다. 혹시 해결방법이 있을까요?

화면 캡처 2024-06-29 215045.png화면 캡처 2024-06-29 215122.png

python 데이터-엔지니어링 airflow

답변 1

0

김현진

안녕하세요 이정민님

아마도 컨테이너가 plugins 디렉토리를 인식하지 못하는 것 같습니다.

docker-compose.yaml 파일 내 volumes 항목 수정 후 재기동이 되었는지요?

 

volumes:

- ${AIRFLOW_PROJ_DIR:-.}/airflow/dags:/opt/airflow/dags

- ${AIRFLOW_PROJ_DIR:-.}/logs:/opt/airflow/logs

- ${AIRFLOW_PROJ_DIR:-.}/config:/opt/airflow/config

- ${AIRFLOW_PROJ_DIR:-.}/airflow/plugins:/opt/airflow/plugins

 

아래와 같이 plugins 디렉토리의 왼쪽 항목이 airflow/plugins 로 수정되어야 합니다.

그리고 docker compose down 후 start 로 재기동해줘야 되요.

아마 이 부분을 놓치신 것 같습니다.

 

docker compose 재기동이 완료되면 컨테이너에 들어가서 plugins 디렉토리 연결이 잘 되었는지 확인해보시면 더 정확합니다. 아래 명령으로 컨테이너 진입 후

% sudo docker compose ps 
% sudo docker exec -it {scheduler 컨테이너ID} bash 

 

/opt/airflow/plugins 디렉토리 내 파일들이 보이는지 확인해보시면

컨테이너에 연결되었는지 확인할 수 있습니다.

 

pykrx 회원제 전환으로 인한 실습 불가

0

114

2

수료증 발급

0

84

3

에러 발생 관련 질문드립니다.

0

83

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

69

2

plugins 폴더 생성

0

76

2

WSL에서 git push 가 안되요 ㅠ

0

115

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

67

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

738

2

설치중인데 venv를 꼭 써야할까요?

0

126

2

설치 버전 관련 질문입니다.

0

68

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

62

1

DAG 만들기 중 airflow 패키지 로드 에러

0

106

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

95

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

76

3

email operator 오류 관련

0

66

2

plugins 폴더 관련

0

100

2

bash operator 관련 문의입니다

0

78

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

79

2

Dags refresh 주기 관련 질문

0

125

2

wsl 관련 질문입니다.!

0

75

2

macOS에서 docker 설치

0

94

2

템플릿 변수에 대한 오류

0

61

2

custom_image 디렉토리 문의드립니다.

0

54

2

ETL 인터뷰 관련 문의

0

103

2