inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

15일간의 빅데이터 파일럿 프로젝트

분석-제플린을 이용한 실시간 분석,

411

ChangWon Jeong

작성한 질문수 5

0

7장. 빅데이터 분석 / 7.6 분석파일럿 4단계 - 제플린을 이용한 실시간 분석을 진행하고 있습니다.

제플린 노트북에서 그림 7.43의 스파크의 스칼라 코드를 작성하고 실행하는데 저에게는 오류가 똭----

분석 스칼라코드 redis ZooKeeper Flume 데이터 엔지니어링 Kafka Impala bigdata Hadoop

답변 1

0

Big.D

안녕하세요! 빅디 입니다.

상단에 코드를 보면 HDFS로 부터 Managed_SmartCar_Drive_Info 데이터를 갖어 오는데요..

이때 HDFS가 Safe모드로 빠져, 데이터를 못갖어와 발생하는 문제가 의심스럽습니다.

 

아래 내용을 먼저 점검후 테스트 부탁드립니다.  

1. HDFS가 Safe 모드로 전환 됐는지 확인  

 $ hdfs dfsadmin -safemode get

2. 만약 Safe 모드가 On 이라면 아래명령으로 해제

 $ hdfs dfsadmin -safemode leave

3. Zeppelin 리스타트

 $ zeppelin-daemon.sh restart

- 빅디 드림

주제영역3 데이타 조회 문의

0

40

2

환경 세팅 후 클라우데라매니저 삭제시

0

64

2

수강 기간 연장 부탁드립니다ㅠ

0

60

2

클라우데라 매니저 접속 불가 및 로그인 정보 문의

0

87

2

gcc 설치 에러

0

117

3

클러스터 설정 오류

0

91

2

클라우데라 클러스터 설치로 안넘어가짐

0

119

2

버추어박스 5.0 설치

0

141

2

워크플로우 예약 실행시 테이블은 생성되는데 데이터가 들어가지지 않습니다.

0

79

2

Hue 500 Error 어떻게 해결할 수 있나요?

0

149

3

환경세팅 질문있습니다.

0

107

2

버쥬얼박스

0

76

2

호스트 불량 문제에 관하여

0

110

2

하이브쿼리에서 에러가 나요...

0

169

3

하이브쿼리에서 에러

0

120

1

Hbase에 적재된 데이터 확인시 에러

0

147

2

파이썬 설치 시 에러

0

159

2

redis-cli 데이터 적재 확인

0

143

2

카프카 토픽 생성에서 에러

0

139

2

HDFS 명령어를 치는데 오류가 납니다

0

135

2

가상환경 내보내기

0

109

1

SpoolDIR 폴더로 옮기

0

104

2

cpu usage 에러

0

114

2

쿼리 실행시 10000 에러

0

122

2