Oozie 환경의 구축

최근 에 빅 데이터 협동 프레임 워 크 를 배 웠 는데 그 중에서 워 크 플 로 협동 프레임 워 크 oozie 를 만 났 습 니 다. oozie 를 설치 하기 전에 hadop 을 설치 해 야 합 니 다. Oozie 환경 구축 이 조금 번 거 롭 습 니 다. 기록 해 보 세 요.
우선 자원 준비:
CDH 버 전의 oozie:                 oozie-4.0.0-cdh5.3.6.tar.gz
        ExtJS 압축 패키지:                  ext-2.2.zip 
        CDH 버 전의 Hadoop:           hadoop-2.5.0-cdh5.3.6.tar.gz
지금부터 설치:
(1). Hadoop 의 core - site. xml 파일 을 설정 합 니 다. 구체 적 인 설정 내용 은 다음 과 같 습 니 다.
      
	
    		hadoop.proxyuser.[OOZIE_SERVER_USER].hosts
    		[OOZIE_SERVER_HOSTNAME]
  	
  	
    		hadoop.proxyuser.[OOZIE_SERVER_USER].groups
    		[USER_GROUPS_THAT_ALLOW_IMPERSONATION]
  	
	  :[OOZIE_SERVER_USER]    Tomcat    
	    [OOZIE_SERVER_HOSTNAME]    Tomcat          
	    [USER_GROUP_THAT_ALLOW_TMPERSONATION]    *   ,           
	
	(2).   oozie-4.0.0-cdh5.3.6.tar.gz
	    tar -zxvf oozie-4.0.0-cdh5.3.6.tar.gz .

	(3).   oozie-4.0.0-cdh5.3.6    oozie-hadooplibs-4.0.0-cdh5.3.6.tar.gz
	    tar -zxvf oozie-hadooplibs-4.0.0-cdh5.3.6.tar.gz
 
  
	(4). (2)            libext   
	    mkdir libext/
 
  
	(5). cp /opt/chd5.3.6/oozie-4.0.0-cdh5.3.6/oozie-4.0.0-cdh5.3.6/hadooplibs/hadooplib-2.5.0-cdh5.3.6.oozie-4.0.0-cdh5.3.6/*   
	       /opt/chd5.3.6/oozie-4.0.0-cdh5.3.6/libext
 
  
	(6).cp /home/shiluo/Desktop/ext-2.2.zip   /opt/chd5.3.6/oozie-4.0.0-cdh5.3.6/libext
 
  
	(7).   bin/oozie-start.sh prepare-war     war    Tomcat  webapp  ,         oozie.war 
	       
 
  
	(8).     Hadoop        ,    Namenode Datanode
	    sbin/hadoop-daemon.sh start namenode
	    sbin/hadoop-daemon.sh start datanode
 
  
	(9).        ,        :
	    bin/oozie-setup.sh sharelib create -fs hdfs://hadoop02.shiluo.com:8020 -locallib oozie-sharelib-4.0.0-cdh5.3.6-yarn.tar.gz
 
  
	(10).            ,  :
	     bin/ooziedb.sh create -sqlfile oozie.sql -run DB Connection
 
  
	(11).    Tomcat    ,  
	     bin/oozied.sh start
 
  
	(12).       hadoop02.shiluo.com:11000      ,    oozie   
 
  
	  :                ,       ,        ,     oozie-site.xml  
	        hadoop       ,      ,          Tomcat    。
 
  
	      

좋은 웹페이지 즐겨찾기