inflearn logo
강의

Course

Instructor

Data Engineering Course (1): Installing Big Data Hadoop Directly

하둡 명령어 실행시 오류

609

lojo03078

2 asked

0

~/hadoop$ hadoop fs -ls

2023-08-29 12:55:53,700 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

 

 

fs 명령어를 실행하면 native-hadoop library를 load할 수 없다는 경고가 뜨면서 명령이 실행되지 않습니다. 하둡 설치 및 설정 과정은 제공해주신 문서 두세번씩 훑으면서 제대로 설정했는데, 어떻게 해야 고칠 수 있을까요 ㅠㅠ? 혹시 우분투를 22.04.3 LTS로 설치하였는데 버전이 달라서 생기는 문제인가요..?

참고로 하둡 설치할 때 강의에 나온 링크는 존재하지 않는다고 나와서
$wget https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/hadoop-3.2.1.tar.gz
여기서 설치하였습니다. 자바는 동일한 버전인 8u271을 설치하였는데, 강의와 다르게 Linux ARM 64 Compressed Archive로 설치했어요.

빅데이터 hadoop 데이터-엔지니어링

Answer 1

0

Billy Lee

안녕하세요.

해당 에러는 하둡 라이브러리 설정 사항이 잘못되어 경로를 찾지 못하는 에러 입니다. 하둡 설정 강의 노트를 다시 한번 흩어 보시면서 경로 지정을 잘 확인하시길 바랍니다.

지속적인 동일 에러가 발생시 하둡 설정 경로 네 가지 모두를 캡쳐하여 보내주시길 바랍니다.

빌리 올림

작업형3 기출

0

6

1

유형2에서 데이터분할 생략 가능여부

0

6

1

9회 기출 유형3 질문

0

7

1

lgb 기초편

0

5

1

괄호 사용

0

8

1

수업노트는 어디서 볼 수 있나요?

0

9

2

작업형 2 데이터 전처리 질문

0

9

0

11회 기출 유형 작업형1 문제 3-1

0

8

0

예시문제 작업형2 (ver2023) 질문입니다

0

10

1

Data type에 따른 처리

0

6

1

데이터 전처리 관련

0

13

2

강사님.. 하단 URL에 있었던 코드들 다운 받거나 공유 부탁 드립니다..

0

46

2

하단 파일이 열리지 않습니다

0

45

1

ssh-keygen -t rsa -P "" 등 ssh 암호화? 는 하둡에서 필수인가요?

0

51

2

자바 환경설정 PATH 연결

0

260

1

동영상 재생이 안됩니다.

0

297

2

sbin/start-dfs.sh Permission denied 에러

0

444

1

Hadop 3.2.1 버전 지원을 안하는거 같습니다

0

357

1

확장팩 필수 유무

0

327

1

jdk 설치 유무 문의

0

287

1

apt-get install openjdk-8-jdk 설치 문의

0

775

1

강의 내용 블로그 작성 관련 문의

0

346

1

하둡 명령어 실행시 오류 문의

0

506

2

노트북 램이 8GB 인데 괜찮나요?

1

432

1