inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

더 많은 Provider 확인 & Connection Type 추가하기

HDFS, Hive new Connection : apt-get update

해결된 질문

338

김도현

작성한 질문수 2

1

HDFS, Hive를 위한 Connection 추가 과정에서 이미지를 빌드하는 부분에서 에러가 발생합니다.

아래 명령 실행 후 에러가 발생하며, 에러 부분은 이미지(참고2)로 첨부하였습니다.

sudo docker build -t airflow_custom .

 

(참고 - Dockerfile 내용 / airflow 2.8.0 version 설치)

사진1.png

 

(참고2 - 에러로그)사진2.png

python 데이터-엔지니어링 airflow

답변 2

1

김현진

안녕하세요 김도현님!

우선 저도 2.8.0 버전으로 동일하게 이미지 생성해봤는데 잘 되긴합니다.

현재 WSL에서 실습중이신거죠?

해당 에러는 저도 처음 봐서 구글링해보니 WSL 내 시스템 시간이 제대로 설정되지 않아서 생기는 문제 같습니다. 우선 아래 순서로 확인해봅시다.

  1. 호스트 컴퓨터(윈도우즈)의 시간이 올바르게 설정되었는지 확인해보고

  2. 제대로 돼있다면 WSL의 시간이 호스트 컴퓨터와 동일한지 확인해보세요.


    WSL의 시간은 date 명령으로 확인 가능합니다.

  3. WSL의 시간이 호스트 컴퓨터의 시간이 다르다면 sudo hwclock -s 명령으로 WSL의 시간을 맞출 수 있습니다.

한번 해보시고 결과 남겨주세요 ^^

 

 

0

김도현

안녕하세요!

확인해보니 WSL 내 시스템 시간이 설정되지 않아서 발생한 문제가 맞았습니다. 실제 한국의 시간과 WSL 내 시스템 간에 6시간 정도 차이가 발생했고, 이 부분을 고쳐주니 문제가 해결되었습니다.

 

자세히 답변해주신 점 감사드리며, (답변을 받기 전에) 조금 다른 방식으로 해결이 되었어서 내용도 같이 공유드립니다.

 

sudo apt install ntp

cd /etc/systemd

sudo systemctl restart ntp

 

감사합니다!

1

김현진

안녕하세요 도현님!

잘 해결되었네요.

보통 WSL은 호스트 컴퓨터의 시간을 따라갈텐데 이상하게 틀어져있었네요.

암튼 열공하시기 바랍니다 ^^

pykrx 회원제 전환으로 인한 실습 불가

0

103

2

수료증 발급

0

78

3

에러 발생 관련 질문드립니다.

0

77

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

68

2

plugins 폴더 생성

0

73

2

WSL에서 git push 가 안되요 ㅠ

0

107

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

65

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

705

2

설치중인데 venv를 꼭 써야할까요?

0

119

2

설치 버전 관련 질문입니다.

0

66

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

60

1

DAG 만들기 중 airflow 패키지 로드 에러

0

104

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

94

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

75

3

email operator 오류 관련

0

63

2

plugins 폴더 관련

0

91

2

bash operator 관련 문의입니다

0

77

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

78

2

Dags refresh 주기 관련 질문

0

123

2

wsl 관련 질문입니다.!

0

72

2

macOS에서 docker 설치

0

92

2

템플릿 변수에 대한 오류

0

58

2

custom_image 디렉토리 문의드립니다.

0

51

2

ETL 인터뷰 관련 문의

0

100

2