spark 학습: org. apache. spark. spark 예외: master URL 을 설정 해 야 합 니 다.

968 단어 빅 데이터-spark
Exception in thread "main" org.apache.spark.SparkException: A master URL must be set in your configuration

알림 에서 프로그램 이 실행 중인 master 를 찾 을 수 없습니다. 환경 변 수 를 설정 해 야 합 니 다.Spark 에 전 달 된 master url 은 다음 과 같은 몇 가지 가 있 습 니 다. local 로 컬 단일 스 레 드 local [K] 로 컬 다 중 스 레 드 (K 개의 커 널 지정) local [*] 로 컬 다 중 스 레 드 (모든 사용 가능 한 커 널 지정)spark://HOST:PORT 지정 한 Spark standalone cluster master 에 연결 하려 면 포트 를 지정 해 야 합 니 다.mesos://HOST:PORT 지정 한 Mesos 군집 에 연결 하려 면 포트 를 지정 해 야 합 니 다.Yarn - client 클 라 이언 트 모드 가 YARN 클 라 이언 트 에 연 결 됩 니 다.HADOOP 설정 이 필요 합 니 다.CONF_DIR。 Yarn - cluster 클 러 스 터 모드 가 YARN 클 러 스 터 에 연결 되 어 있 습 니 다.HADOOP 설정 이 필요 합 니 다.CONF_DIR。 edit configuration 을 누 르 고 왼쪽 에서 이 항목 을 누 르 십시오.오른쪽 VM options 에 '- DSpark. master = local' 을 입력 하여 프로그램 로 컬 단일 스 레 드 가 실행 되도록 지시 하고 다시 실행 하면 됩 니 다.
SparkConf conf = new SparkConf();
		conf.setAppName("LG_CALCULATE");
		conf.setMaster("local");

좋은 웹페이지 즐겨찾기