Cloud에서 Hadoop으로 데이터 전송 및 Spark에서 참조

만든 Cluster로 데이터를 전송하고 Spark에서 참조합니다. 로컬 (Mac)에서 webhdfs를 사용하여 hdfs로 파일을 전송합니다. webhdfs에는 REST 인터페이스가 있습니다. 기본적으로 webhdfs URL이 지불되므로 사용합니다. hdfs 구성 Bluemix의 Hadoop은 hdfs의 루트 디렉토리 아래에 아래 그림의 구성을 기본적으로 제공합니다. 또, user 디렉토리 한...

Bluemix스파크biginsightshadoop