-
질문 & 답변
카테고리
-
세부 분야
데이터 엔지니어링
-
해결 여부
미해결
클라우데라 클러스터 status가 모두 fail로 뜹니다.
21.10.17 22:47 작성 조회수 200
0
안녕하세요.
클라우데라 클러스터를 만들고 나서 사진과 같이 빨간색으로 fail로 뜹니다.
vm 서버 종료하고 메모리를 기존 3GB 정도의 크기에서 2GB로도 줄여보고 4GB, 5GB로 늘려보기도 했는데 여전히 같은 상황입니다. 프로젝트를 빨리 해보고 싶은데 여기서 막혀서 진도를 나가지 못하고 있네요.. 어떻게 해결할 수 있을까요?
조언 부탁드립니다.
답변을 작성해보세요.
0
Jiyun Lee
질문자2021.10.18
안녕하세요. 우선 답변 감사드립니다.
어제는 계속해서 모두 Red 상태였는데 지금 다시 켜보니 YARN만 Red 입니다..
어째서 달라진건지 모르겠습니다.
참고로 현재 server01, 02의 메모리는 8GB씩 잡아놓은 상태입니다.
- YARN
-HOSTS
Big.D
지식공유자2021.10.19
네~
YARN의 JobHistory 서버의 Shut Down 상태가 원인으로 보입니다.
Job History 서버는 YARN의 작업 내역을 모니터링 하는 서버인데, 제한된 자원의 파일럿 PC 환경으로 인해 Shut Down이 자주 발생 합니다. 이로인해 실습을 진행 하는데 직접적인 문제를 일으키지는 않습니다.
JobHistory 서버를 선택해서 재시작 하면, 문제없이 정상 기동 될겁니다.
추가로 CM의 모니터링 정보는 수분전의 상태를 주기적으로 표기 하기때문에, 실시간 정보가 아니라는점 참고해 주세요~
- 빅디 드림
0
Big.D
지식공유자2021.10.18
안녕하세요! 빅디 입니다.
Red로 표기 됐다고 해서 시스템에 치명적인 문제가 있는것은 아닙니다.
자원(디스크, 메모리 등) 사용률이 특정 임계치를 넘어서도 Red로 표기 되기도 합니다.
우선 Jiyun Lee님의 CM에서 Red 표기 원인을 상세히 확인해 볼 필요가 있습니다.
HDFS, YARN 등의 표기된 Red 아이콘을 클릭해서 상세 페이지의 내용을 캡쳐해서 공유해 주세요!!
- 빅디 드림
답변 2