sqoop(v1.4.6)의 설치

1354 단어 개발 도구sqoop
1. 설치 준비
1. 소프트웨어 의존
jdk(v1.8.0 73), mysql(v5.6.26),hdfs(자체 클러스터 준비 및 시작),hive(v2.3.2)
2. 설치 노드 계획
sqoop        
              hadoop hive hbase 

2. 설치 절차:
1. 설치 패키지 업로드(클러스터 환경에 업로드) 2. 설치 패키지 압축 해제
 tar -xvzf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz

3. 환경 변수 설정
ln -s sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop(                           )
export SQOOP_HOME=/home/hadoop/apps/sqoop
export PATH=$PATH:$SQOOP_HOME/bin
source /etc/profile 

검증:sqoop version 4를 사용하여 sqoop 프로필 수정
cd /home/hadoop/apps/sqoop/conf  (       ,          )
mv sqoop-env-template.sh sqoop-env.sh

파일에서 다음을 구성해야 합니다. # Hadoop의 설치 디렉토리 export HADOOPCOMMON_HOME=/home/hadoop/apps/hadoop-2.7.7
#   hadoop mr     
export HADOOP_MAPRED_HOME=mr     

#set the path to where bin/hbase is available
#export HBASE_HOME=hbase    

#  hive     
export HIVE_HOME=hive     

#   zookeeper       ( :/home/hadoop/apps/zookeeper-3.4.10/conf)
export ZOOCFGDIR=zookeeper       

5, mysql 드라이버를 sqoop의 설치 디렉터리의lib에/home/hadoop/apps/sqoop/lib까지 설치하고 완료 6, mysql의 모든 데이터베이스 목록을 확인하고\linux에서 줄을 바꿉니다.하나의 명령이 너무 길어서 줄을 바꾼 후에 sqoop list-databases –connect jdbc: mysql://노드 주소: (노드 포트, 기본 3306)/-username 사용자 이름 -password 비밀번호를 계속 입력할 수 있습니다

좋은 웹페이지 즐겨찾기