inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

Kafka & Spark 활용한 Realtime Datalake

Spark 서버 생성

spark01 인스턴스 생성시 문제점 발생

87

syjo

작성한 질문수 2

1

우분투 서버 선택하는부분에 강사님과 다른 목록밖에 없어서 인스턴스 시작이 되고있지 않습니다.

image.png

kafka apache-spark pyspark data-lake

답변 1

0

김현진

안녕하세요 syjo님!

정말 사라졌네요. 25년 4월 경에 바꼈나봅니다.

일단 ubuntu OS 이기만 하면 명령어는 다른 것은 거의 없어서 22.04 LTS 로 골라주시면 될 것 같습니다.

수업노트에도 추가해놓을께요.

알려주셔서 감사합니다 ^-^

0

syjo

22.04 LTS 로 했을때 인스턴스 생성이 안됩니다....

microsoft sql server is not supported for the instance type 't3.large'.

이런 메시지가 뜹니다

0

김현진

syjo님

확인해보니 해당 이미지는 t3.large에서 설치가 안되는게 맞네요.

24.04 설치하는 방법은 아래 보시고 해보시겠어요?

 

  1. 우측에 더 많은 AMI 찾아보기 들어가기

image.png

 

  1. ubuntu 24.04 LTS 검색한 후에
    AWS MarketPlace AMI 로 선택한 후
    나오는 여러 이미지 중에서 Ubuntu 24.04 LTS - Noble 선택

    image.png


  2. 구독하기 버튼 (추가 비용은 없습니다)

    image.png


  3. 그러면 아래처럼 24.04 이미지 사용이 가능합니다.
    제가 해보니 t3.large 까지 잘 만들어졌고 서버 로그인도 잘 됩니다.

    image.png



    해당 내용은 수업 노트에도 반영해놓을께요. 알려주셔서 감사드려요!

 

 

파이참 25.3.4 버전에서 한폴더에 두개 프로젝트 생성하는 방법은?

0

26

2

consumer가 모든 파티션을 읽지 않는 이슈가 있습니다

0

79

3

람다 아키텍처에서 speed layer 관련 질문드립니다

0

54

1

아키텍처 관련 질문

0

66

1

code deploy 배포에러

0

72

4

/homework/ch10_3/dataframe_cache.py 과제 질문

0

69

2

ch4_3 apache zookeeper 설치파일 관련 질문

0

83

3

질문있습니다 섹션13. Spark streaming 부분

0

65

2

ot 자료

0

65

2

git action - code deploy단계

0

94

2

IDE - Pycharm / VSCode

0

86

1

UI For Apache Kafka 설치하기

0

127

2

kafka broker prompt 변경 확인

0

76

2

디스코드 만료

0

68

2

Zookeeper 설치 오류

1

81

3

github 레파지토리 생성 및 연결 관련 질문드립니다!

0

55

2

git action실행 안됨

0

162

1

터미널에서 NAT 인스턴스로 직접 로그인 안됨

0

65

1

AWS EC2 생성하기 2분55초 부분

0

57

2

git action에서 install_codedeploy-agent.yml

0

53

2

consumer 실행 오류 질문: connect ip 관련

0

95

2

Spark Programs 구조에서 막혔습니다.

0

60

2

kafka-broker01 ping 반응 없습니다.

0

74

3

github actions 오류 문의 드립니다.

0

74

2