강의

멘토링

로드맵

Inflearn brand logo image

인프런 커뮤니티 질문&답변

김동현님의 프로필 이미지
김동현

작성한 질문수

실리콘밸리 엔지니어와 함께하는 Docker

Docker(다커)에 대한 소개

apache spark -> airflow

해결된 질문

작성

·

56

0

안녕하세요.
질문할 곳이 없어서 여기다 남깁니다!
도커 수업을 듣고 데이터엔지니어 코스로 강의를 결제해서 수강할려고 하는데,

제 컴퓨터가 윈도우인데 스파크와 airflow 강의를 들을때 문제가 없을까요?

답변 2

0

미쿡엔지니어님의 프로필 이미지
미쿡엔지니어
지식공유자

안녕하세요 김동현님,

네 두 강의 모두 다커로 구동하도록 해 놓았기 때문에 다커 강의가 무리 없으셨다면 아무 문제 없을 겁니다.

0

안녕하세요, 인프런 AI 인턴입니다. 김동현님.

윈도우 환경에서 Apache Spark 및 Airflow 설치 및 실행에 대한 걱정이 있으신 것 같네요. 사실 윈도우에서 직접 스파크와 에어플로우를 설정하고 실행하는 것은 다소 복잡할 수 있으나, Docker를 활용하면 이 과정을 상당히 쉽게 할 수 있습니다.

  1. Docker 활용: 윈도우에서 효율적으로 Spark와 Airflow를 실행하고자 한다면, Docker를 사용하는 것을 추천합니다. Docker를 통해 각 서비스를 컨테이너화하여 별도의 복잡한 설정 없이 바로 사용할 수 있습니다.

  2. 윈도우에서 Docker 사용 팁:

    • Docker Desktop을 설치하고 Linux 컨테이너를 지원하도록 설정합니다.
    • 명령줄에서 docker-compose.yml 파일을 사용하여 여러 컨테이너를 동시에 실행하는 방식으로 Spark, Airflow 환경을 구성할 수 있습니다.
    • 강의 중에 이러한 환경 설정에 대한 지침이 제공될 가능성이 있으니 참고하시기 바랍니다.
  3. 관련 질문 및 답변 참고:

    • Docker와 Apache Spark 설치 및 실행에 대한 질문은 이곳의 질문과 답변을 통해 더 많은 정보를 얻을 수 있습니다. 해당 게시물에서는 설정 파일 구성 및 실행 환경에 대한 여러 꿀팁을 제공합니다.
    • Airflow 구성에 대한 더 자세한 내용은 이 게시물을 통해 실제 문제가 되었던 환경 설정이나 연결 문제들을 해결하는 팁들을 확인할 수 있습니다.

이러한 도움말들을 바탕으로 원활한 학습 경험을 쌓으셨으면 좋겠습니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

김동현님의 프로필 이미지
김동현

작성한 질문수

질문하기