로그 집합 설정

3370 단어 빅 데이터
로그 집합 개념: 프로그램 실행 이 완료 되면 프로그램 실행 로그 정 보 를 HDFS 시스템 에 업로드 합 니 다.로그 집합 기능 장점: 프로그램 운행 에 대한 상세 한 정 보 를 편리 하 게 볼 수 있 고 디 버 깅 개발 에 편리 합 니 다.메모: 로그 집합 기능 을 켜 려 면 NodeManager, Resource Manager, History Manager 를 다시 시작 해 야 합 니 다.로그 모 으 기 기능 오픈 구체 적 인 절 차 는 다음 과 같 습 니 다:
  • yarn - site. xml 설정 [atguigu@hadoop101hadop] $vi yarn - site. xml 이 파일 에 다음 설정 을 추가 합 니 다.
  • 
    <property>
    <name>yarn.log-aggregation-enablename>
    <value>truevalue>
    property>
    
    
    <property>
    <name>yarn.log-aggregation.retain-secondsname>
    <value>604800value>
    property>
    
  • NodeManager, Resource Manager, History Manager 를 닫 습 니 다 [atguigu@hadoop101 hadoop-2.7.2]$ sbin/yarn-daemon.sh stop resourcemanager [atguigu@hadoop101 hadoop-2.7.2]$ sbin/yarn-daemon.sh stop nodemanager [atguigu@hadoop101 hadoop-2.7.2]$ sbin/mr-jobhistory-daemon.sh stop historyserver
  • NodeManager, Resource Manager, History Manager 시작 [atguigu@hadoop101 hadoop-2.7.2]$ sbin/yarn-daemon.sh start resourcemanager [atguigu@hadoop101 hadoop-2.7.2]$ sbin/yarn-daemon.sh start nodemanager [atguigu@hadoop101 hadoop-2.7.2]$ sbin/mr-jobhistory-daemon.sh start historyserver
  • HDFS 에 존재 하 는 출력 파일 삭제 [atguigu@hadoop101 hadoop-2.7.2]$ bin/hdfs dfs -rm -R /user/atguigu/output
  • WordCount 프로그램 실행 [atguigu@hadoop101 hadoop-2.7.2]$ hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount /user/atguigu/input /user/atguigu/output
  • 로 그 를 보십시오. 그림 2 - 37, 2 - 38, 2 - 39 참조.http://hadoop101:19888/jobhistory
  • 좋은 웹페이지 즐겨찾기