작성
·
108
·
수정됨
0
안녕하세요.
「앞서 Airflow 예제를 개선해보자 (v3) - 실습 편」 강의 수강 중 궁금한 점이 있어 문의드립니다.
DAG 실행 시 생성되는 tmp
파일이 제대로 생성되었는지 확인하고 싶어, CLI 환경이 아닌 웹 UI상에서 확인할 수 있는 방법이 있는지 알아보던 중 궁금한 점이 생겼습니다.
/opt/airflow
디렉토리 구조는 CLI 환경에서만 확인 가능한 것인지, 웹 UI상에서는 해당 경로의 파일 구조를 직접 확인할 수 없는 것인지 궁금합니다.
추가로 확인이 가능한 부분이 있다면 현업에서는 어떻게 주로 확인하는지도 궁금합니다!
답변 1
1
필요하다면 그 구조를 노출해주는 DAG나 Plugin을 만들어볼 수 있습니다만 Airflow Web UI 자체에 그런 기능은 없는 걸로 알고 있습니다.
보통 내용을 확인하려면 Airflow가 동작하는 서버로 로그인해서 살펴보는 것이 일반적이라 할 수 있습니다. Docker Container를 쓰는 환경이라면 해당 Docker Container 안으로 로그인해보는 것이구요. 클라우드 기반의 Airflow 서비스를 쓰는 경우라면 서버 안으로 들어가서 체크하는 걸 허용하지 않지만 대신 Airflow 서버내 dags 폴더로 맵핑되는 폴더를 클라우드 스토리지 등에 구성하고 그걸 미러링하는 것이 일반적입니다.
질문 감사드립니다. 혹시 위 답변에 추가 질문이 있다면 알려주세요