Unhealthy Node 때문에 Accepted 상태에서 Running 상태로 넘어가지 않습니다.
안녕하세요 강사님. 강의 잘 듣고 있습니다.
해당 강의에 나오는Hive Query를 실행시켰습니다.
진행 중에 MapReduce가 Accepted에서 Running으로 넘어가지 않습니다.
저사양 파일럿 환경이라 Node를 1개만 사용하고 있는데,
사용중인 1개의 노드가 Unhealthy라서 동작하지 않는 것으로 보입니다.
- 누군가 리소스를 점유하고 있는 것은 아닌지
- default queue의 리소스가 여유로운지
위의 두 요소를 살펴보았는데, 현재 MapReduce에 할당된 것이 없습니다. (MapReduce에 실행 중이라고 뜨는 것이 이 Hive Query의 MapReduce 동작 이외에 없음)
다음과 같이 나옵니다.
- /etc/hadoop/conf의 yarn-site.xml을 건드려보려고 했는데, 정확히 어떤 것을 건드려야 할지 몰라 멈춰있는 상태입니다.
혹시 어떤 방법이 있을지 궁금합니다.
감사합니다
답변 1
0
안녕하세요! 빅디 입니다.
디스크와 힙메모리의 사용량이 의심스러운 데요..
우선 아래 명령어로 Server02에 접속하셔서 디스크 여유 공간을 확인해봐 주세요~
$ du -h
- 빅디 드림
0
pilot-pjt 디렉토리 : 3.8G,
/ (root directory) : 24G
를 사용하고 있습니다.
여유 공간 부족으로 보입니다.
확장하는 방법에 어떤 것이 있나요?
0
네..디스크 공간을 조금만 더 확보하면 문제 없을듯 합니다.
우선 다운로드후 설치가 끝난 아래 설치 파일들을 삭제해서 디스크공간을 확보해 주세요.
/home/pilot-pjt/redis-5.0.7.tar.gz
/home/pilot-pjt/apache-storm-1.2.3.tar.gz
/home/pilot-pjt/zeppelin-0.8.2-bin-all.tgz
/home/pilot-pjt/apache-mahout-distribution-0.13.0.tar.gz
- 빅디 드림
ps. 그리고 가상 이미지의 디스크를 늘리는건 꾀나 손이 많이 가는 작업입니다. 구글링에서 "virtualbox 디스크 용량 늘리기"로 찾아 보시면 되는데요, VirtualBox와 리눅스 버젼에 따라 방식에 있어 조금씩 차이가 있기도 합니다.
주제영역3 데이타 조회 문의
0
40
2
환경 세팅 후 클라우데라매니저 삭제시
0
65
2
수강 기간 연장 부탁드립니다ㅠ
0
60
2
클라우데라 매니저 접속 불가 및 로그인 정보 문의
0
89
2
gcc 설치 에러
0
117
3
클러스터 설정 오류
0
91
2
클라우데라 클러스터 설치로 안넘어가짐
0
120
2
버추어박스 5.0 설치
0
141
2
워크플로우 예약 실행시 테이블은 생성되는데 데이터가 들어가지지 않습니다.
0
79
2
Hue 500 Error 어떻게 해결할 수 있나요?
0
151
3
환경세팅 질문있습니다.
0
107
2
버쥬얼박스
0
76
2
호스트 불량 문제에 관하여
0
110
2
하이브쿼리에서 에러가 나요...
0
169
3
하이브쿼리에서 에러
0
120
1
Hbase에 적재된 데이터 확인시 에러
0
147
2
파이썬 설치 시 에러
0
159
2
redis-cli 데이터 적재 확인
0
143
2
카프카 토픽 생성에서 에러
0
139
2
HDFS 명령어를 치는데 오류가 납니다
0
135
2
가상환경 내보내기
0
109
1
SpoolDIR 폴더로 옮기
0
104
2
cpu usage 에러
0
114
2
쿼리 실행시 10000 에러
0
122
2