목록하둡 (2)

IT 꿈나무의 일상

Hadoop 완전분산모드로 설치하기 (2)

0. 하둡 환경변수 설정 vim .bash_profile 에 다음과 같은 환경변수 설정 export HADOOP_HOME=/usr/local/hadoop export HADOOP_MAPRED_HOME=$HADOOP_HOME export HADOOP_COMMON_HOME=$HADOOP_HOME export HADOOP_HDFS_HOME=$HADOOP_HOME export YARN_HOME=$HADOOP_HOME export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native" export HADOOP_PID_DIR=${HADOOP_HOME}/pids ..
IT 관련 2021. 4. 4. 16:02
Hadoop 완전 분산 모드로 설치하기 (1)

Hadoop 설치 (완전분산모드) 다음은 하둡 완전분산모드 설치하는 방법입니다. # 환경구성 - 하둡을 설치하기 전에 모든 서버는 JDK설치, hadoop실행계정 생성, ssh 인증같은 기본적인 환경설정이 완료되어 있어야합니다. ## 설치순서 0. 자바설치 (두개의 서버 계정에) 1. hadoop 계정 생성 2. 통신 라이브러리 설치 (ssh, rsync) 3. hadoop 바이너리 설치 4. 하둡설정변경 5. protocol buffer 설치 6. fully-distributed configuration 환경 구성 0. 자바설치 바이너리 받아서 서버에 각각 설치 1. hadoop 계정 생성 각 서버에 동일한 이름으로 hadoop 설치 할 계정을 생성한다. (계정 이름은 동일한 편이 다루기 쉽다.) [M..
IT 관련 2021. 3. 1. 23:08
Prev 1 Next