inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

도커&에어플로우설치

에어플로우 일부 작동 비정상

103

yjs7298

작성한 질문수 7

0

스크린샷 2025-06-01 오후 4.47.46.png

 

안녕하세요. 강사님 현재 저는 mac 기반이며,

airflow 을 띄우는데는 성공하였습니다.

 

dag으로 들어가, 실행까지는 잘 되는데 그 후 코드나 그래프를 확인하려면 무한로딩만 되어

내용을 볼수없는 상황입니다

스크린샷 2025-06-01 오후 4.48.57.png

.

문제가 되는 화면인데, 혹시 몰라 docker ps 로 입력 시 일부 몇개가 unhealthy 하게 나오는것을 확인하였는데, 이 부분과 문제가 있을까요?

python 데이터-엔지니어링 airflow

답변 2

0

김현진

안녕하세요 yjs7298님

아무래도 컨테이너 unhealthy 상태랑 연관있어 보입니다.

혹시 docker compose up 했을 때 ERROR 로 보이는 로그가 있으면 캡처해서 올려주시겠어요?

아마도 api-server 가 문제인 것 같은데 api-server 컨테이너에서 나오는 ERROR 로그를 위주로 봐주시면 될 것 같아요.

0

인프런 AI 인턴

안녕하세요, yjs7298님. 인프런 AI 인턴입니다.

현재 Airflow가 실행되는 환경에서 DAG의 코드나 그래프를 확인할 수 없고 무한 로딩이 발생한다고 하셨습니다. 더불어 docker ps에서 일부 컨테이너가 “unhealthy” 상태임을 확인하신 것 같습니다. 이는 문제의 원인일 수 있습니다. Airflow와 관련된 일반적인 문제와 해결법을 안내드리겠습니다.

  1. Unhealthy 상태인 컨테이너:

    • 컨테이너가 “unhealthy” 상태일 경우, Airflow의 정상 동작을 방해할 수 있습니다. 이 상태는 주로 컨테이너 내에서 진행되는 특정 서비스가 제대로 실행되거나 준비되지 않았음을 나타냅니다. 먼저, 해당 컨테이너의 로그를 확인하여 문제의 원인을 파악하는 것이 중요합니다. 예를 들어, 데이터베이스 연결 오류, 메모리 부족, 의존 패키지 문제 등이 있을 수 있습니다.
  2. 로그 확인

    • 각 컨테이너의 로그를 docker logs [컨테이너 ID] 명령어를 사용하여 확인합니다. 특히, Airflow의 웹 서버, 스케줄러, 워커 컨테이너에서 오류 메시지가 있는지 확인합니다.
    • 로그에서 에러 메시지와 관련된 정보를 통해 구체적인 문제를 파악할 수 있습니다.
  3. Docker 환경 재시작

    • 문제가 발생하는 컨테이너를 재시작하거나, 전체 Docker Compose를 재시작하는 것도 방법입니다. docker compose down 후, docker compose up 명령어를 통해 환경을 초기화하고 다시 시작하면 됩니다.
  4. Resource Limit 확인

    • Docker 환경에서 사용 가능한 메모리 및 CPU 자원이 충분한지 확인합니다. 특히 많은 DAG와 작업을 처리할 때 리소스 부족은 일반적인 문제입니다.
  5. 데이터베이스 연결 확인

    • PostgreSQL과 같은 데이터베이스 컨테이너 역시 “unhealthy” 상태일 수 있으며, 이는 Airflow의 정상 작동에 큰 영향을 줄 수 있습니다. 데이터베이스 연결 설정(host, port, user, password)을 재검토하시고, 데이터베이스가 정상적으로 작동하는지 확인하세요.

여기에서 유사한 문제에 대한 해결 방법을 다룬 기존 답변도 참고하시면 도움이 될 것입니다:
- docker-compose를 이용한 Airflow 설치 중 문제가 발생할 때의 해결 방법

위의 사항들을 점검하시고, 문제가 지속된다면 구체적인 로그 정보와 함께 다시 문의해 주세요. 추가적인 도움을 드릴 수 있습니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

pykrx 회원제 전환으로 인한 실습 불가

0

114

2

수료증 발급

0

84

3

에러 발생 관련 질문드립니다.

0

83

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

69

2

plugins 폴더 생성

0

76

2

WSL에서 git push 가 안되요 ㅠ

0

115

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

67

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

738

2

설치중인데 venv를 꼭 써야할까요?

0

126

2

설치 버전 관련 질문입니다.

0

68

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

62

1

DAG 만들기 중 airflow 패키지 로드 에러

0

106

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

95

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

76

3

email operator 오류 관련

0

66

2

plugins 폴더 관련

0

100

2

bash operator 관련 문의입니다

0

78

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

79

2

Dags refresh 주기 관련 질문

0

125

2

wsl 관련 질문입니다.!

0

75

2

macOS에서 docker 설치

0

94

2

템플릿 변수에 대한 오류

0

61

2

custom_image 디렉토리 문의드립니다.

0

54

2

ETL 인터뷰 관련 문의

0

103

2