HDFS Java API 에서 사용 하 는 파일 내용 읽 기
2814 단어 Hadoop
package com.ibeifeng.hadoop.senior.hdfs;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
public class HdfsApp {
public static FileSystem getFileSystem() throws Exception{
Configuration conf = new Configuration();
FileSystem fileSystem = FileSystem.get(conf);
return fileSystem;
}
public static void readFile(String filename) throws Exception{
//get filesystem
FileSystem fileSystem = getFileSystem();
//String filename = "/user/beifeng/mapreduce/input/word";
//read path
//String name = filename;
Path readPath = new Path(filename);
//open file
FSDataInputStream inStream = fileSystem.open(readPath);
//
try{
IOUtils.copyBytes(inStream, System.out, 4096, false);
}catch(Exception e){
e.printStackTrace();
}finally{
//close Stream
IOUtils.closeStream(inStream);
}
}
public static void main(String[] args) throws Exception {
String filename = "/user/beifeng/mapreduce/input/word";
readFile(filename);
}
}
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
Java 액세스 Hadoop 분산 파일 시스템 HDFS 구성 설명프로파일 m103은hdfs 서비스 주소로 바꿉니다. Java 클라이언트를 이용하여 HDFS의 파일을 액세스하려면 프로필hadoop-0.20.2/conf/core-site를 사용해야 합니다.xml입니다. 처음에 저는 ...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.