HDFS Federation 질문있습니다!
빠짐없이 하나씩 하나씩 가르쳐주시니 저같은 레벨은 계속 반복해서 보면 큰 도움이될 것 같습니다!
강의 나오는 개념중에 HDFS Fedeartion이 여러개 네임스페이스? 네임서비스를 지원하다고 하는데 코드랩에서는 일단 하나만 써서 진행하시는 것 같은데.. 혹시 2개 이상하려고 하면 어떻게 설정해야할까요.. 혹시 빅데이터 직무 면접때 공격으로 나올것같아서요..ㅋㅋ
Answer 2
2
안녕하세요 breeze90님,
제가 이제 막 귀국해서 질문을 확인했습니다. 해외 중요 일정이 있어서 다소 답변이 늦어진 점 양해 부탁드립니다.
수업시간에 설명드린 hdfs-site.xml 설정했던 부분 기억나시나요? 거기에서 dfs.nameservices value 부분에 , 를 통해서 multiple namservices를 설정할 수 있습니다. 가령 만약 수업시간에 설명한 dfs-cluster 와 더불어 추가적으로 namservice를 만들고 싶다면 (namservice1: dfs-cluster-foo, nameservice2: dfs-cluster-boo 가정한다면)
<property>
<name>dfs.nameservices</name>
<value>dfs-cluster-foo, dfs-cluster-boo</value>
</property>이런식으로 선언해주시고, dfs-cluster 에 설정한대로 추가한 nameservice도 rpc-address, http-address 페어별로 각각 설정해주시면 됩니다.
수업을 집중해서 들어주시니 감사하고, 화이팅입니다!
1
안녕하세요 breeze90 님, 인프런 AI 인턴이에요.
HDFS Federation은 여러 개의 네임스페이스를 지원하는 개념입니다. 코드랩에서는 강의의 목적에 따라 단일 네임스페이스로 진행한 것으로 생각됩니다. 하지만 실제로 HDFS Federation을 구성해야 할 경우에는 더 많은 네임스페이스를 설정할 수 있습니다.
2개 이상의 네임스페이스를 설정하려면 여러 가지 단계를 거쳐야 합니다. 예를 들어, hdfs-site.xml 파일을 수정하여 네임노드 간의 고유한 네임스페이스 ID를 할당하고, 데이터노드의 설정도 수정해야 합니다. 또한 새로운 네임스페이스에 대한 데이터 디렉토리를 설정하고, 네임노드와 데이터노드를 재시작해야 할 수도 있습니다.
실제로 HDFS Federation을 구성하고 설정하는 방법에 대해서는 고유한 환경과 요구 사항에 따라 달라질 수 있으니, 상세한 내용은 Apache Hadoop의 공식 문서나 참고 자료를 참조하는 것이 좋습니다. 면접에서 공격 질문으로 나올 수도 있으므로, HDFS Federation에 대한 개념과 설정 방법에 대해 자세히 알아두시면 도움이 될 것입니다. 화이팅하세요!
작업형 1 유형 부분
0
9
1
작업형 1 (삭제예정, 구 버전)
0
28
2
수강기간 연장 문의드립니다.
0
21
1
섹션4 AWS NAT Instance생성하는 과정에서 오류가 지속해서 발생합니다.
0
12
1
2유형 레이블 인코딩 VS 원핫 인코딩
0
23
3
수강기간 연장 문의드립니다.
0
26
1
인덱스 슬라이싱
0
27
2
astro dev start - python 라이브러리 설치 fail
0
22
1
맥북 환경구성 에러
0
19
2
Free Edition 실습 영상은 아직 업데이트전인가요?
0
22
1
질문 드립니다.
0
45
2
강의 내용 관련 질문드립니다~
0
43
2
라이브 운영중인 환경의 테이블에 인덱스 추가시 고려사항
0
36
2
수강 연장 문의
0
54
2
강의자료 일괄 다운로드
0
50
2
list 문제 질문드립니다~
0
35
2
zookeeper security group 에러
0
393
2
ssh master02 입력시 permission denied 에러
0
351
2
vim etc/hosts 질문
0
403
2
섹션 9. Codelab Guidance 재생 오류
1
249
2
수업에 쓰인 코드 관련
0
392
2
강의자료
0
260
1
QJM의 Split Brain 해결법과 Zookeper의 Split Brain 해결법의 차이에 대한 질문
1
407
1
안녕하세요, 성능평가에 대해 궁금합니다.
1
285
2

