Airflow 오류
51
작성한 질문수 1
안녕하세요! 먼저 수업 잘 듣고 있습니다 :)
현재 section 6까지 완강하였습니다.
32강 varible 실습 코드부터 airflow에 올라오지 않는 것 같습니다.
git push와 git pull 완료 후, wsl에 dags 폴더 내에 해당 코드들이 있는 건 확인했습니다.
하루에 정해진 작업량이 있어서 그런건지 여쭤보고 싶습니다.
compose down 시키고 다시 airflow 올려도 똑같이 현시가 안되는 상황입니다....ㅠ
답변 2
0
안녕하세요 lelee 님
우선 하루 정해진 할당량 같은건 없습니다.
혹시 코드 parsing 에러로 인해 임포트가 안되는건 아닌지요?
만약 문법 에러가 있어서 에러가 발생하면 2.x 버전대 기준으로 화면 상단에 에러난 dag들이 나옵니다. 그런건 아닌지 확인 부탁드려요.
0
안녕하세요, 인프런 AI 인턴입니다.
3634lelee 님의 질문 감사드립니다. Airflow에서 DAG가 제대로 작동하지 않을 때 여러 가지 원인이 있을 수 있으며, 주로 DAG 디렉토리 설정 문제나 환경 설정 파일의 잘못된 설정 등이 이유가 될 수 있습니다. 다음은 관련 문제와 해결 방법에 대한 기존 유사 질문과 답변을 안내드립니다.
-
- 이 질문에서는 Airflow 설치 및 실행 중 겪을 수 있는 일반적인 문제에 대해서 다루고 있습니다. 특히 환경 설정 파일과 DAG 디렉토리 관련된 문제를 해결하는 방법을 참고하실 수 있습니다.
- 이 질문에서는 Airflow 설치 및 실행 중 겪을 수 있는 일반적인 문제에 대해서 다루고 있습니다. 특히 환경 설정 파일과 DAG 디렉토리 관련된 문제를 해결하는 방법을 참고하실 수 있습니다.
-
- 여기에서 다양한 repo나 디렉토리 설정 시 환경 설정 파일을 어떻게 맞춰야 하는지 설명하고 있습니다. DAG 디렉토리는 Docker 환경과 연결되며, 설정이 올바르지 않으면 DAG 인식에 문제가 생길 수 있습니다.
- 여기에서 다양한 repo나 디렉토리 설정 시 환경 설정 파일을 어떻게 맞춰야 하는지 설명하고 있습니다. DAG 디렉토리는 Docker 환경과 연결되며, 설정이 올바르지 않으면 DAG 인식에 문제가 생길 수 있습니다.
질문하신 내용 중 “하루에 정해진 작업량”이라는 부분은 Airflow 자체 기능과는 관련이 없으며, 일반적으로 Airflow는 일정량의 task를 처리할 수 있도록 설계되어 있습니다. DAG가 보이지 않는다면 환경 설정 문제일 가능성이 높습니다. 아래 사항들을 확인해 보세요:
airflow.cfg파일에서dags_folder경로가 적절히 설정되어 있는지 확인하십시오.
docker-compose.yaml파일에서 volume 설정이 제대로 되어 있는지,dags디렉토리가 적절히 공유되고 있는지 확인하십시오.
- Scheduler가 제대로 실행되고 있는지, 로그에서 오류 메세지가 있는지 확인해 보세요.
Airflow 공식 문서와 설치 단계에 따라 설정을 확인하시면 도움이 될 수 있습니다. 추가적인 질문이 있으시면 언제든 질문해 주세요. 😊
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
pykrx 회원제 전환으로 인한 실습 불가
0
114
2
수료증 발급
0
84
3
에러 발생 관련 질문드립니다.
0
83
2
vscode 작업화면에 오류가 발생하지 않습니다.
0
69
2
plugins 폴더 생성
0
76
2
WSL에서 git push 가 안되요 ㅠ
0
115
2
chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.
0
67
2
github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ
0
738
2
설치중인데 venv를 꼭 써야할까요?
0
126
2
설치 버전 관련 질문입니다.
0
68
1
우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?
0
62
1
DAG 만들기 중 airflow 패키지 로드 에러
0
106
2
3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!
0
95
3
task_id 사용법이 뭔가 바뀐 것 같습니다.
0
76
3
email operator 오류 관련
0
66
2
plugins 폴더 관련
0
100
2
bash operator 관련 문의입니다
0
78
3
스케쥴러 - DAG 파싱 부하 줄이는 과정 질문
0
79
2
Dags refresh 주기 관련 질문
0
125
2
wsl 관련 질문입니다.!
0
75
2
macOS에서 docker 설치
0
94
2
템플릿 변수에 대한 오류
0
61
2
custom_image 디렉토리 문의드립니다.
0
54
2
ETL 인터뷰 관련 문의
0
103
2





