hadop 3.0 높 은 HA 빅 데이터 플랫폼 구조 소프트웨어 와 배치 방안 (2)
1898 단어 빅 데이터 구조
1. 운영 체제:
1. centos 설치 7 USB 설치 튜 토리 얼
2. 클 러 스 터 계획
3. 모든 노드 기본 설정
3.1 호스트 / hostname 설정: vi / etc / hosts vi /etc/hostname
3.2, IP 설정: vi / etc / sysconfig / network - script / ifcfg - enp4s 0
3.3 방화벽 닫 기: systemctl stop firewalld systemctl enable firewalld
3.4, selinux: vi / etc / selinux / config 닫 기 SELINUX = disabled 수정
3.5, 모든 노드 설치 시계 동기 화 ntp: yum install ntp
3.6, SSH 비밀번호 로그 인 면제 설정: ssh - keygen - t rsa
3.7 설정 FTP 튜 토리 얼 설치
3.8, jdk - 8u144 - linux - x64. gz 를 다운로드 하고 디 렉 터 리 에 압축 해제: / opt / jdk 1.8.0 144
3.9 환경 변수 설정: vi / etc / profile 활성화: source / etc / profile
#set java env
export JAVA_HOME=/opt/jdk1.8.0_144
export PATH=$PATH:$JAVA_HOME/bin
export CLASSPATH=.:$JAVA_HOME/lib/rt.jar
#set hadoop env
export HADOOP_HOME=/opt/hadoop-3.0.0-beta1
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
#set zookeeper env
export ZOOKEEPER_HOME=/opt/zookeeper-3.5.3-beta
export PATH=$PATH:$ZOOKEEPER_HOME/bin
4. 소프트웨어 설치 설정
4.1、zookeeper-3.5.3-beta.tar.gz HA 설명 설정 원리 상해
4.2 、hadoop-3.0.0-beta1.tar.gz HA 설명 설정 원리 상해
4.3 、hbase-2.0.0-alpha3-bin.tar.gz HA 설명 설정 원리 상해
4.4 、apache-hive-2.3.0-bin.tar.gz
4.5 、spark-2.2.0-bin-hadoop2.7.tgz HA 설명 설정