HDP (ambari) 기반 Flink 1.9.0 컴 파일
3411 단어 빅 데이터
준비 하 다
1. Apache Maven 3.2.5 설치
2. 플 랭크 셰 이 드 - 7.0 다운로드
3. flink - release - 1.9.0 다운로드
2. 컴 파일 준비
1. flink - shaded 프로젝트 의 pom. xml 를 수정 하고 다음 과 같이 추가 합 니 다.
상술 한 내용 을 첨가 하 다 안 으로 들어가다.
vendor-repos
vendor-repos
cloudera-releases
https://repository.cloudera.com/artifactory/cloudera-repos
true
false
HDPReleases
HDP Releases
https://repo.hortonworks.com/content/repositories/releases/
false true
HortonworksJettyHadoop
HDP Jetty
https://repo.hortonworks.com/content/repositories/jetty-hadoop
false true
mapr-releases
https://repository.mapr.com/maven/
false true
2. flink - shaded - hadop - 2 컴 파일 (내 hadop 버 전 은 3.1.0.3.0.0.0 - 1634)
mvn clean install -DskipTests -Drat.skip=true -Pvendor-repos -Dhadoop.version=3.1.0.3.0.0.0-1634
비고: 도중에 잘못 보고 하면 jar 에서 다운로드 할 수 없 으 면 Maven 창고 로 수 동 으로 가 져 옵 니 다.
3. flink - relase - 1.9.0 에서 pom 파일 을 수정 하고 다음 과 같이 추가 합 니 다.
vendor-repos
vendor-repos
cloudera-releases
https://repository.cloudera.com/artifactory/cloudera-repos
true
false
HDPReleases
HDP Releases
https://repo.hortonworks.com/content/repositories/releases/
false true
HortonworksJettyHadoop
HDP Jetty
https://repo.hortonworks.com/content/repositories/jetty-hadoop
false true
mapr-releases
https://repository.mapr.com/maven/
false true
5. 컴 파일 flink - 1.9
mvn clean install -DskipTests -Pvendor-repos -Drat.skip=true -Pinclude-hadoop -Dhadoop.version=3.1.0.3.0.0.0-1634
완성 하 다.
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
spark 의 2: 원리 소개Google Map/Reduce 를 바탕 으로 이 루어 진 Hadoop 은 개발 자 에 게 map, reduce 원 어 를 제공 하여 병렬 일괄 처리 프로그램 을 매우 간단 하고 아름 답 게 만 들 었 습 니 다.S...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.
좋은 웹페이지 즐겨찾기
