Inflearn brand logo image

인프런 커뮤니티 질문&답변

Charlie님의 프로필 이미지
Charlie

작성한 질문수

실리콘밸리 데이터 리더가 알려주는 Airflow 기초

앞서 Airflow 예제를 개선해보자 (v3) - 실습

Airflow 웹 UI에서 파일 디렉토리 구조 확인이 가능한가요?

작성

·

108

·

수정됨

0

안녕하세요.

「앞서 Airflow 예제를 개선해보자 (v3) - 실습 편」 강의 수강 중 궁금한 점이 있어 문의드립니다.

DAG 실행 시 생성되는 tmp 파일이 제대로 생성되었는지 확인하고 싶어, CLI 환경이 아닌 웹 UI상에서 확인할 수 있는 방법이 있는지 알아보던 중 궁금한 점이 생겼습니다.

/opt/airflow 디렉토리 구조는 CLI 환경에서만 확인 가능한 것인지, 웹 UI상에서는 해당 경로의 파일 구조를 직접 확인할 수 없는 것인지 궁금합니다.

추가로 확인이 가능한 부분이 있다면 현업에서는 어떻게 주로 확인하는지도 궁금합니다!

답변 1

1

한기용님의 프로필 이미지
한기용
지식공유자

필요하다면 그 구조를 노출해주는 DAG나 Plugin을 만들어볼 수 있습니다만 Airflow Web UI 자체에 그런 기능은 없는 걸로 알고 있습니다.

보통 내용을 확인하려면 Airflow가 동작하는 서버로 로그인해서 살펴보는 것이 일반적이라 할 수 있습니다. Docker Container를 쓰는 환경이라면 해당 Docker Container 안으로 로그인해보는 것이구요. 클라우드 기반의 Airflow 서비스를 쓰는 경우라면 서버 안으로 들어가서 체크하는 걸 허용하지 않지만 대신 Airflow 서버내 dags 폴더로 맵핑되는 폴더를 클라우드 스토리지 등에 구성하고 그걸 미러링하는 것이 일반적입니다.

질문 감사드립니다. 혹시 위 답변에 추가 질문이 있다면 알려주세요

Charlie님의 프로필 이미지
Charlie

작성한 질문수

질문하기