inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

Airflow 오류

51

3634lelee

작성한 질문수 1

0

안녕하세요! 먼저 수업 잘 듣고 있습니다 :)

현재 section 6까지 완강하였습니다.

32강 varible 실습 코드부터 airflow에 올라오지 않는 것 같습니다.

git push와 git pull 완료 후, wsl에 dags 폴더 내에 해당 코드들이 있는 건 확인했습니다.

하루에 정해진 작업량이 있어서 그런건지 여쭤보고 싶습니다.

compose down 시키고 다시 airflow 올려도 똑같이 현시가 안되는 상황입니다....ㅠ

python 데이터-엔지니어링 airflow

답변 2

0

김현진

안녕하세요 lelee 님

우선 하루 정해진 할당량 같은건 없습니다.

혹시 코드 parsing 에러로 인해 임포트가 안되는건 아닌지요?

만약 문법 에러가 있어서 에러가 발생하면 2.x 버전대 기준으로 화면 상단에 에러난 dag들이 나옵니다. 그런건 아닌지 확인 부탁드려요.

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다.

3634lelee 님의 질문 감사드립니다. Airflow에서 DAG가 제대로 작동하지 않을 때 여러 가지 원인이 있을 수 있으며, 주로 DAG 디렉토리 설정 문제나 환경 설정 파일의 잘못된 설정 등이 이유가 될 수 있습니다. 다음은 관련 문제와 해결 방법에 대한 기존 유사 질문과 답변을 안내드립니다.

  1. 맥북으로 실습 진행이 가능한지 궁금합니다.

    • 이 질문에서는 Airflow 설치 및 실행 중 겪을 수 있는 일반적인 문제에 대해서 다루고 있습니다. 특히 환경 설정 파일과 DAG 디렉토리 관련된 문제를 해결하는 방법을 참고하실 수 있습니다.
  2. dags 경로 설정 질문 있습니다.

    • 여기에서 다양한 repo나 디렉토리 설정 시 환경 설정 파일을 어떻게 맞춰야 하는지 설명하고 있습니다. DAG 디렉토리는 Docker 환경과 연결되며, 설정이 올바르지 않으면 DAG 인식에 문제가 생길 수 있습니다.

질문하신 내용 중 “하루에 정해진 작업량”이라는 부분은 Airflow 자체 기능과는 관련이 없으며, 일반적으로 Airflow는 일정량의 task를 처리할 수 있도록 설계되어 있습니다. DAG가 보이지 않는다면 환경 설정 문제일 가능성이 높습니다. 아래 사항들을 확인해 보세요:

  • airflow.cfg 파일에서 dags_folder 경로가 적절히 설정되어 있는지 확인하십시오.
  • docker-compose.yaml 파일에서 volume 설정이 제대로 되어 있는지, dags 디렉토리가 적절히 공유되고 있는지 확인하십시오.
  • Scheduler가 제대로 실행되고 있는지, 로그에서 오류 메세지가 있는지 확인해 보세요.

Airflow 공식 문서와 설치 단계에 따라 설정을 확인하시면 도움이 될 수 있습니다. 추가적인 질문이 있으시면 언제든 질문해 주세요. 😊

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

pykrx 회원제 전환으로 인한 실습 불가

0

114

2

수료증 발급

0

84

3

에러 발생 관련 질문드립니다.

0

83

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

69

2

plugins 폴더 생성

0

76

2

WSL에서 git push 가 안되요 ㅠ

0

115

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

67

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

738

2

설치중인데 venv를 꼭 써야할까요?

0

126

2

설치 버전 관련 질문입니다.

0

68

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

62

1

DAG 만들기 중 airflow 패키지 로드 에러

0

106

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

95

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

76

3

email operator 오류 관련

0

66

2

plugins 폴더 관련

0

100

2

bash operator 관련 문의입니다

0

78

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

79

2

Dags refresh 주기 관련 질문

0

125

2

wsl 관련 질문입니다.!

0

75

2

macOS에서 docker 설치

0

94

2

템플릿 변수에 대한 오류

0

61

2

custom_image 디렉토리 문의드립니다.

0

54

2

ETL 인터뷰 관련 문의

0

103

2