inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

task 연결하기

git pull 시 docker 재부팅 질문

95

min0

작성한 질문수 5

0

안녕하세요
dag commit 이후
git pull 당겨오면 webserver 에 dag가 안보이는데 Docker 재시작하면 나타나더라구요
자동으로 반영되게 하는방법 없을까요?

python 데이터-엔지니어링 airflow

답변 2

0

김현진

안녕하세요 min0님

기본적으로 git pull 해서 파일이 들어오면 조금 기다리면 dag이 뜨기는 합니다.

기본 파라미터가 5분으로 설정돼있어요 (dag_dir_list_interval 파라미터, 기본값 300초)

혹시 더 오래 기다렸는데도 웹에서 DAG이 안 뜨나요?

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다. min0님.

Airflow 환경에서 Git 저장소로부터 DAG 파일을 업데이트한 후 웹 인터페이스에서 자동으로 반영되지 않아 Docker를 재시작할 필요가 있는 상황이시군요. DAG 파일 업데이트 후 자동으로 반영되지 않는 문제는 여러 사용자가 겪는 문제 중 하나입니다.

이와 관련하여 참고할 만한 기존 질문과 답변이 있습니다:

  1. auto refresh: 이 질문에서는 auto-refresh 기능에 대해 설명하고 있으며, dag 업데이트 후 자동으로 반영되지 않는 경우에 대한 답변이 포함되어 있습니다. 새로운 dag 파일이 webserver에 즉시 반영되지 않는 경우, 대부분은 스케줄러 또는 웹서버 설정 문제일 수 있습니다. 특히, 스케줄러 컨테이너 안의 /opt/airflow/dags 디렉토리에서 파일이 정상적으로 업데이트되고 있는지를 확인해보는 것도 하나의 방법입니다.

  2. dag list가 안보이는 이유..: 해당 질문에서는 새로운 DAG가 웹 인터페이스에 나타나지 않는 문제에 대해 다루고 있으며, Docker 재기동을 통한 해결 경험을 공유하고 있습니다.

DAG를 업데이트한 후에도 웹 인터페이스에서 변경 사항이 즉시 반영되기 위해서는 다음을 확인해야 합니다:
- 스케줄러가 정상적으로 실행되고 있는지 확인하세요. 스케줄러가 DAG 파일을 감지하고 로드해야 합니다.
- 웹서버의 환경에서 파일 변경을 자동으로 감지하도록 설정되지 않았다면, 수동으로 갱신하거나 재시작해야 할 수도 있습니다.

이러한 문제는 대부분 환경 설정에 따라 발생할 수 있으므로, 설정을 재검토하고 필요에 따라 자동 갱신 옵션을 조정해보시기 바랍니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

pykrx 회원제 전환으로 인한 실습 불가

0

114

2

수료증 발급

0

84

3

에러 발생 관련 질문드립니다.

0

83

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

69

2

plugins 폴더 생성

0

76

2

WSL에서 git push 가 안되요 ㅠ

0

115

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

67

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

738

2

설치중인데 venv를 꼭 써야할까요?

0

126

2

설치 버전 관련 질문입니다.

0

68

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

62

1

DAG 만들기 중 airflow 패키지 로드 에러

0

106

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

95

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

76

3

email operator 오류 관련

0

66

2

plugins 폴더 관련

0

100

2

bash operator 관련 문의입니다

0

78

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

79

2

Dags refresh 주기 관련 질문

0

125

2

wsl 관련 질문입니다.!

0

75

2

macOS에서 docker 설치

0

94

2

템플릿 변수에 대한 오류

0

61

2

custom_image 디렉토리 문의드립니다.

0

54

2

ETL 인터뷰 관련 문의

0

103

2