inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

15일간의 빅데이터 파일럿 프로젝트

7.분석 파일럿 실행 5단계 - 02. 스마트카 상태정보 예측 (하)

~\CH07\HiveQL\그림-7.60.hql 실행오류

361

HyoungSik Park

작성한 질문수 3

0

7.분석파일럿실행5단계-02스마트카상태정보예측(하)에서 Hive Query 파일 ~\CH07\HiveQL\그림-7.60.hql을 Hue Hive Query Editor에서 실행하면,

아래와 같은 오류 메시지가 나옵니다.

 

Unable to move source hdfs://server01.hadoop.com:8020/tmp/hive/admin/ed5ce198-e0d8-473a-93ac-c6b8a130e15d/hive_2022-11-18_14-10-21_815_3739448736364799299-1/-mr-10000 to destination /home/pilot-pjt/spark-data/classification/input

해결방벙이 있을까요?,

초기 버추얼가상서버 설정시 Server01에 DataNode를 설정한게 문제가 되는거 같기도 한데요, 확인해 보니 강사님은 Server01에는 NameNode만 설정하신거 같더라구요

hivequery 분석 Hadoop bigdata Kafka Impala Flume redis 데이터 엔지니어링 ZooKeeper

답변 1

0

Big.D

안녕하세요! HyoungSik Park님!

실행한 Hive 쿼리의 첫번째 줄에 보시면 아래 명령이 있습니다.

" insert overwrite local directory "

OS(CentOS)의 로컬 디렉토리에 하이브 실행 결과를 생성 하라는 명령인데요..

아래의 명령어로 바꿔서 실행봐 주세요~

" insert overwrite directory '/pilot-pjt/spark-data/classification/input"

이렇게 바꿔서 실행이 되면, 하이브 실행 결과 파일이 로컬 디스크가 아닌 HDFS에 생성 됩니다.

Hue의 파일 브라우져 또는 hdfs의 get 명령어로 해당 경로를 지정해 다운로드 받아서 진행 하시면 됩니다.

조금만 더 힘내세요! ^^

-빅디 드림

 

0

HyoungSik Park

네, 감사합니다.

알려주신대로 하니 잘되네요...

주제영역3 데이타 조회 문의

0

40

2

환경 세팅 후 클라우데라매니저 삭제시

0

64

2

수강 기간 연장 부탁드립니다ㅠ

0

60

2

클라우데라 매니저 접속 불가 및 로그인 정보 문의

0

87

2

gcc 설치 에러

0

117

3

클러스터 설정 오류

0

91

2

클라우데라 클러스터 설치로 안넘어가짐

0

119

2

버추어박스 5.0 설치

0

141

2

워크플로우 예약 실행시 테이블은 생성되는데 데이터가 들어가지지 않습니다.

0

79

2

Hue 500 Error 어떻게 해결할 수 있나요?

0

149

3

환경세팅 질문있습니다.

0

107

2

버쥬얼박스

0

76

2

호스트 불량 문제에 관하여

0

110

2

하이브쿼리에서 에러가 나요...

0

169

3

하이브쿼리에서 에러

0

120

1

Hbase에 적재된 데이터 확인시 에러

0

147

2

파이썬 설치 시 에러

0

159

2

redis-cli 데이터 적재 확인

0

143

2

카프카 토픽 생성에서 에러

0

139

2

HDFS 명령어를 치는데 오류가 납니다

0

135

2

가상환경 내보내기

0

109

1

SpoolDIR 폴더로 옮기

0

104

2

cpu usage 에러

0

114

2

쿼리 실행시 10000 에러

0

122

2