Only one SparkContext may be running in this JVM (see SPARK-2243). To ignore this error, set spark.d

1660 단어 SparkStreaming
Only one SparkContext may be running in this JVM (see SPARK-2243). To ignore this error, set spark.driver.allowMultipleContexts = true. The currently running SparkContext was created at:XXX
해결: 이 오류는 여러 개의 sparkContext를 만들었기 때문입니다. 일반적으로 StreamingContext를 만들 때 SparkContext를 사용했기 때문입니다.
val conf = new SparkConf().setAppName("SparkStreamingAndKafka").setMaster("local[2]")
val sc = new SparkContext(conf)
val ssc = new StreamingContext(conf, Seconds(5))

val sc = new SparkContext 주석 삭제하기

좋은 웹페이지 즐겨찾기