Spark 연산 자-RDD 액 션(saveasNewAPIHadoopFile)
saveAsNewAPIHadoopFile
4.567913.4.567913.4.567913.4.567913.4.567913.작용 은 saveas HadoopDataset 과 같 고 새로운 버 전의 Hadoop API 만 사용 할 수 있 습 니 다.HBase 를 기록 하 는 예:HBase 작성 표:<span style="font-weight: normal;"><span style="font-size:12px;">def saveAsNewAPIHadoopFile[F <: OutputFormat[K, V]](path: String)(implicit fm: ClassTag[F]): Unit
def saveAsNewAPIHadoopFile(path: String, keyClass: Class[_], valueClass: Class[_], outputFormatClass: Class[_ <: OutputFormat[_, _]], conf: Configuration = self.context.hadoopConfiguration): Unit</span></span>
완전한 Spark 응용 프로그램:saveAsNewAPIHadoopFile RDD HDFS , Hadoop API。 saveAsHadoopFile
주의:HBase 에 저장 하고 실행 할 때 SPARKCLASSPATH 에 HBase 관련 jar 가방 을 추가 합 니 다.참고 가능:http://lxw1234.com/archives/2015/07/332.htm
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
다양한 언어의 JSONJSON은 Javascript 표기법을 사용하여 데이터 구조를 레이아웃하는 데이터 형식입니다. 그러나 Javascript가 코드에서 이러한 구조를 나타낼 수 있는 유일한 언어는 아닙니다. 저는 일반적으로 '객체'{}...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.