하둡 설치하기

 

1. 하둡 위키 페이지에서 필요한 자바 버전 확인

설치하려는 하둡 버전에 따라 필요한 자바 버전을 확인한다.

$ java version

설치된 자바 버전을 확인한다.

 

2. 하둡 배포 페이지에서 배포판 바이너리 다운로드

원하는 버전의 binary 를 클릭하면 아래 화면으로 이동한다.

링크를 클릭해서 다운로드 한다.

 

3. 압축 풀기

$ tar xzf hadoop-3.3.4.tar.gz     # 다운로드한 파일

 

4. 환경 변수 설정

$ export HADOOP_HOME=/Users/jimin/Downloads/hadoop-3.3.4    # 하둡이 설치된 경로
$ export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

 

5. 하둡 버전 확인

$ hadoop version

 

6. 환경 설정

하둡은 세 가지 동작 모드가 있다.

• 독립 모드 (standalone) : 데몬이 실행되지 않고 모든 것이 단독 JVM 내에서 실행된다.
• 의사 분산 모드 (pseudo-distributed) : 모든 하둡 데몬을 로컬 머신에서 실행한다.
• 완전 분산 모드 (fully-distributed) : 하둡 데몬을 여러 대의 머신으로 구성된 클러스터에서 실행한다.

원하는 동작 모드에 따라 설정 파일을 수정해야 한다. 설정 파일은  /etc/hadoop  디렉터리에 있으며 기본적으로 독립 모드에 맞춰져 있다.