hadoop hdfs tips

더 읽 기
1. 인터넷 의 hdfs - webDav 로 windows 기기 에서 인터넷 이웃 을 통 해 hadop 의 hdfs 파일 시스템 을 물 을 수 있 습 니 다.단계:
   1. hdfs - webdav. war 다운로드, hdfs - webdev. war 의 WEB - INF / classes / hadop - site. xml 수정
hdfs - webdev 가 연결 할 hadop NameNode 서버 를 확인 하기 위해 fs. default. name 속성 을 수정 합 니 다. 예제:

property>
   fs.default.name
   hdfs://10.0.1.8:54310/
   namenode

    2. hadop - xxxx - core. jar 버 전 교체
hadop 은 자신의 rpc 원 격 호출 이 이 루어 지고 있 으 며, 각 버 전 간 호 환 되 지 않 을 수 있 습 니 다 (0.17. x 와 0.18. x 사이 에는 호 환 되 지 않 습 니 다). 따라서 WEB - INF / lib / hadop - xxxx - core. jar 버 전 을 NameNode Server 버 전과 일치 시 켜 야 합 니 다. 현재 war 는 hadop - 0.17.2.1 - core. jar 버 전 을 가지 고 있 습 니 다.
    3. 방문http://localhost:8080/hdfs-webdev
    4. '인터넷 이웃' 을 열 고 인터넷 이웃 을 추가 하고 '인터넷 이웃 의 위 치 를 입력 하 세 요' 에 웹 폴 더 의 URL 을 입력 하 세 요.
http://localhost:8080/hdfs-webdev
그리고 가이드 의 힌트 에 따라 다음 단 계 를 계속 하면 됩 니 다. 
----------------------------
상기 설정 을 통 해 인터넷 이웃 에서 hadfs 파일 을 볼 수 있 지만 업로드 할 수 없고 업로드 하 자마자 오 류 를 보고 할 수 있 습 니 다.
오래 찾 아 보 니 hadop 권한 문제 입 니 다. hadop - site. xml 에 다음 과 같은 내용 을 추가 합 니 다.

        dfs.permissions
        false



        dfs.web.ugi
        hadoop,supergroup

2. webDav 로 중국어 파일 을 업로드 하 는 문 제 를 해결 합 니 다.
    이것 은 hadop 은 기본적으로 utf - 8 형식 이 고 windows 는 gbk 이기 때문에 디 코딩 을 해 야 합 니 다. webDav 는 tomcat 용 기 를 통 해 파일 을 업로드 하기 때문에 tomcat 에서 디 코딩 을 해 야 합 니 다. 즉, Ok 입 니 다.