inflearn logo
강의

Khóa học

Chia sẻ kiến thức

Docker cùng với kỹ sư Thung lũng Silicon

Giới thiệu về Docker

apache spark -> airflow

Đã giải quyết

160

eastmanin9241

2 câu hỏi đã được viết

0

안녕하세요.
질문할 곳이 없어서 여기다 남깁니다!
도커 수업을 듣고 데이터엔지니어 코스로 강의를 결제해서 수강할려고 하는데,

제 컴퓨터가 윈도우인데 스파크와 airflow 강의를 들을때 문제가 없을까요?

docker container

Câu trả lời 2

0

altoformula

안녕하세요 김동현님,

네 두 강의 모두 다커로 구동하도록 해 놓았기 때문에 다커 강의가 무리 없으셨다면 아무 문제 없을 겁니다.

0

communityai8509

안녕하세요, 인프런 AI 인턴입니다. 김동현님.

윈도우 환경에서 Apache Spark 및 Airflow 설치 및 실행에 대한 걱정이 있으신 것 같네요. 사실 윈도우에서 직접 스파크와 에어플로우를 설정하고 실행하는 것은 다소 복잡할 수 있으나, Docker를 활용하면 이 과정을 상당히 쉽게 할 수 있습니다.

  1. Docker 활용: 윈도우에서 효율적으로 Spark와 Airflow를 실행하고자 한다면, Docker를 사용하는 것을 추천합니다. Docker를 통해 각 서비스를 컨테이너화하여 별도의 복잡한 설정 없이 바로 사용할 수 있습니다.

  2. 윈도우에서 Docker 사용 팁:

    • Docker Desktop을 설치하고 Linux 컨테이너를 지원하도록 설정합니다.
    • 명령줄에서 docker-compose.yml 파일을 사용하여 여러 컨테이너를 동시에 실행하는 방식으로 Spark, Airflow 환경을 구성할 수 있습니다.
    • 강의 중에 이러한 환경 설정에 대한 지침이 제공될 가능성이 있으니 참고하시기 바랍니다.
  3. 관련 질문 및 답변 참고:

    • Docker와 Apache Spark 설치 및 실행에 대한 질문은 이곳의 질문과 답변을 통해 더 많은 정보를 얻을 수 있습니다. 해당 게시물에서는 설정 파일 구성 및 실행 환경에 대한 여러 꿀팁을 제공합니다.
    • Airflow 구성에 대한 더 자세한 내용은 이 게시물을 통해 실제 문제가 되었던 환경 설정이나 연결 문제들을 해결하는 팁들을 확인할 수 있습니다.

이러한 도움말들을 바탕으로 원활한 학습 경험을 쌓으셨으면 좋겠습니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

Service(name: traefik)의 EXTERNAL_IP 가 Pending 입니다.

1

22

2

[15. ConfigMap, Secret - 실습] Env (File) 실습 시 문의사항

1

19

2

학습방법 문의

1

20

2

페어링 오류

0

15

2

코드자료 활용 깃

1

19

2

Node Schedule 실습 시 pod3 생성 시 메모리 요청량이 올라가지 않는 사항

1

28

1

localhost:30000 접속 안되는 문제 관련 질문

0

45

2

Guest OS

1

45

2

sprint 강의 내용 보이지 않음

1

39

2

회사 내 AI 툴 사용에 대한 질문

0

39

1

설치 관련 문의

0

47

2

Docker Desktop 설치 관련 질문

0

51

2

kubeTM Blog는 없어진건가요????

1

44

2

configmap 을 환경변수로 사용할 때 파드 적용 시점 문의

1

35

2

Docker + Spring Boot CI/CD 방법

0

39

2

gateway 생성 후 접속 확인 질문

0

55

2

docker compose에 대해 질문드립니다.

0

42

1

Ingress 생성하기 ingressclass 질문

1

51

2

deployment 업데이트 및 롤백 실행하기 -2

1

49

2

JPA Repository 질문이 있습니다!

1

43

2

페이지네이션 처리를 쿼리에서 하는 방식 질문

1

40

1

젠킨스버전과 플러그인설치

1

50

2

mysql 포트 사용에 관하여

1

121

2

저만 안 되는 것인가요? ㅠㅠ

0

265

2