inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Airflow 마스터 클래스

더 많은 Provider 확인 & Connection Type 추가하기

connection type 추가하기중 docker image 생성 오류

71

newl0.dev

작성한 질문수 6

0

강사님,

 

버전문제로 설치가 안되는것 같은데,

어디서 upgrade를 해야 하나요?

 

[+] Building 10.9s (6/7) docker:default

=> [internal] load build definition from Dockerfile 0.0s

=> => transferring dockerfile: 483B 0.0s

=> [internal] load metadata for docker.io/apache/airflow:2.10.5 0.0s

=> [internal] load .dockerignore 0.0s

=> => transferring context: 2B 0.0s

=> [1/4] FROM docker.io/apache/airflow:2.10.5 0.0s

=> CACHED [2/4] RUN apt-get update && apt-get install -y --no-install-recommends gcc heimdal-dev g++ libsasl2-dev && apt-get 0.0s

=> ERROR [3/4] RUN pip install pip install apache-airflow-providers-apache-hdfs pip install apache-airflow-providers-apache-hive 10.6s

------

> [3/4] RUN pip install pip install apache-airflow-providers-apache-hdfs pip install apache-airflow-providers-apache-hive:

8.415 Requirement already satisfied: pip in /home/airflow/.local/lib/python3.12/site-packages (25.0)

9.209 ERROR: Could not find a version that satisfies the requirement install (from versions: none)

10.14

10.14 [notice] A new release of pip is available: 25.0 -> 25.1.1

10.14 [notice] To update, run: pip install --upgrade pip

10.14 ERROR: No matching distribution found for install

------

Dockerfile:13

--------------------

12 | USER airflow

13 | >>> RUN pip install \

14 | >>> pip install apache-airflow-providers-apache-hdfs \

15 | >>> pip install apache-airflow-providers-apache-hive

16 | RUN pip uninstall -y argparse

--------------------

ERROR: failed to solve: process "/bin/bash -o pipefail -o errexit -o nounset -o nolog -c pip install pip install apache-airflow-providers-apache-hdfs pip install apache-airflow-providers-apache-hive" did not complete successfully: exit code: 1

python 데이터-엔지니어링 airflow

답변 1

0

김현진

안녕하세요 newI0.dev

혹시.. RUN 부분에서

RUN pip install \ 
    apache-airflow-providers-apache-hdfs \ 
    apache-airflow-providers-apache-hive  

이런식으로 작성해야 하는데

pip install 을 계속 붙이신게 아닌가 싶네요.

pip install 은 위에 한번만 나오면 됩니다.

pykrx 회원제 전환으로 인한 실습 불가

0

114

2

수료증 발급

0

84

3

에러 발생 관련 질문드립니다.

0

83

2

vscode 작업화면에 오류가 발생하지 않습니다.

0

69

2

plugins 폴더 생성

0

76

2

WSL에서 git push 가 안되요 ㅠ

0

115

2

chatGPT&Airflow로 블로그 자동 포스팅하기 는 Deprecated 가 필요합니다.

0

67

2

github에 회원가입이 안되는데 원인이 뭔지 모르겠어요 ㅠ

0

738

2

설치중인데 venv를 꼭 써야할까요?

0

126

2

설치 버전 관련 질문입니다.

0

68

1

우분투 버전 다운받아야하는데 어떤걸로 설치해야할까요?

0

62

1

DAG 만들기 중 airflow 패키지 로드 에러

0

106

2

3.0에서도 수업노트가 성립하는지 확인 부탁드립니다!

0

95

3

task_id 사용법이 뭔가 바뀐 것 같습니다.

0

76

3

email operator 오류 관련

0

66

2

plugins 폴더 관련

0

100

2

bash operator 관련 문의입니다

0

78

3

스케쥴러 - DAG 파싱 부하 줄이는 과정 질문

0

79

2

Dags refresh 주기 관련 질문

0

125

2

wsl 관련 질문입니다.!

0

75

2

macOS에서 docker 설치

0

94

2

템플릿 변수에 대한 오류

0

61

2

custom_image 디렉토리 문의드립니다.

0

54

2

ETL 인터뷰 관련 문의

0

103

2