Flink 병렬 설정 방법 및 실행 수준

1373 단어
Flink 병렬 설정 방법
코드에서 설정setParallelism()전역 설정:
env.setParallelism(3); 


산자 설정(부분 설정):
sum(1).setParallelism(3)



클라이언트 CLI 설정: -p
./bin/flink run -p 3


시스템 설정: 구성 파일 설정 수정/conf/flink-conf.yaml parallelism.defaul       4. 최대 병렬 설정
전역 설정:
env.setMaxParallelism(n) 


산자 설정(부분 설정):
sum(1).setMaxParallelism(n)

기본값의 최대 병행도는 OperatorParallelism + (operatorParallelism/2)와 비슷하며 하한선은 127이고 상위권은 32768. 
Flink 구성 수준: 연산자 > 글로벌 env>CLI> 구성 파일.
.setParallelism() 설정의 병행도는 보다 작아야 합니다.setMaxParallelism() 설정의 최대 병렬

좋은 웹페이지 즐겨찾기