주키퍼 3.8.4
**노드 스타트 메모
#마스터에서
hdfs namenode -format # 맨 처음 클러스터 구성전 포맷
[네임노드 -format 하게되면 지정한 namenode 디렉터리가 생성됨!]
# start-all.sh 있지만 (이건 가급적 지양)
start-dfs.sh #hdfs 시작
start-yarn.sh #yarn 시작
mr-jobhistory-daemon.sh start historyserver #맵리듀스 시작
or
$HADOOP_HOME/bin/mapred --daemon start historyserver #이것도 맵리듀스 시작
# 정지는 역순
stop-yarn.sh
stop-dfs.sh
$HADOOP_HOME/bin/mapred --daemon stop historyserver
#세이프 모드 확인 및 off
hdfs dfsadmin -safemode get
hdfs dfsadmin -safemode leave
# 잘 떴는지 확인
hdfs dfsadmin -report**
네이버 클라우드 PaaS 버전
- NCP Cloud Haddop 버전은 상이함 아래에서 확인하기
완성 후 확인 정보
=시작= (폴더 압축풀기까지하고 755 주기, .ssh 권한 바뀌면 오류남)
hadoop 그룹 및 유저 추가 및 권한 설정
- 그룹 및 유저 추가 및 권한 설정 (root 사용자로 설치 x)
Hadoop 패키지 설치 및 자바 패키지 설치
- wget 대신 scp 사용함
- 아니면 아파치 공식 사이트에서 다운로드
자바 설치
- 자바 설치함 openlogic-openjdk-8u402-b06-linux-x64
하둡 환경변수 및 ssh 설정 (모든 노드에 해야함)