강의

멘토링

로드맵

Inflearn brand logo image

인프런 커뮤니티 질문&답변

3634lelee님의 프로필 이미지
3634lelee

작성한 질문수

Airflow 마스터 클래스

Airflow 오류

작성

·

32

0

안녕하세요! 먼저 수업 잘 듣고 있습니다 :)

현재 section 6까지 완강하였습니다.

32강 varible 실습 코드부터 airflow에 올라오지 않는 것 같습니다.

git push와 git pull 완료 후, wsl에 dags 폴더 내에 해당 코드들이 있는 건 확인했습니다.

하루에 정해진 작업량이 있어서 그런건지 여쭤보고 싶습니다.

compose down 시키고 다시 airflow 올려도 똑같이 현시가 안되는 상황입니다....ㅠ

답변 2

0

김현진님의 프로필 이미지
김현진
지식공유자

안녕하세요 lelee 님

우선 하루 정해진 할당량 같은건 없습니다.

혹시 코드 parsing 에러로 인해 임포트가 안되는건 아닌지요?

만약 문법 에러가 있어서 에러가 발생하면 2.x 버전대 기준으로 화면 상단에 에러난 dag들이 나옵니다. 그런건 아닌지 확인 부탁드려요.

0

안녕하세요, 인프런 AI 인턴입니다.

3634lelee 님의 질문 감사드립니다. Airflow에서 DAG가 제대로 작동하지 않을 때 여러 가지 원인이 있을 수 있으며, 주로 DAG 디렉토리 설정 문제나 환경 설정 파일의 잘못된 설정 등이 이유가 될 수 있습니다. 다음은 관련 문제와 해결 방법에 대한 기존 유사 질문과 답변을 안내드립니다.

  1. 맥북으로 실습 진행이 가능한지 궁금합니다.

    • 이 질문에서는 Airflow 설치 및 실행 중 겪을 수 있는 일반적인 문제에 대해서 다루고 있습니다. 특히 환경 설정 파일과 DAG 디렉토리 관련된 문제를 해결하는 방법을 참고하실 수 있습니다.
  2. dags 경로 설정 질문 있습니다.

    • 여기에서 다양한 repo나 디렉토리 설정 시 환경 설정 파일을 어떻게 맞춰야 하는지 설명하고 있습니다. DAG 디렉토리는 Docker 환경과 연결되며, 설정이 올바르지 않으면 DAG 인식에 문제가 생길 수 있습니다.

질문하신 내용 중 “하루에 정해진 작업량”이라는 부분은 Airflow 자체 기능과는 관련이 없으며, 일반적으로 Airflow는 일정량의 task를 처리할 수 있도록 설계되어 있습니다. DAG가 보이지 않는다면 환경 설정 문제일 가능성이 높습니다. 아래 사항들을 확인해 보세요:

  • airflow.cfg 파일에서 dags_folder 경로가 적절히 설정되어 있는지 확인하십시오.
  • docker-compose.yaml 파일에서 volume 설정이 제대로 되어 있는지, dags 디렉토리가 적절히 공유되고 있는지 확인하십시오.
  • Scheduler가 제대로 실행되고 있는지, 로그에서 오류 메세지가 있는지 확인해 보세요.

Airflow 공식 문서와 설치 단계에 따라 설정을 확인하시면 도움이 될 수 있습니다. 추가적인 질문이 있으시면 언제든 질문해 주세요. 😊

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

3634lelee님의 프로필 이미지
3634lelee

작성한 질문수

질문하기