클 라 우 드 학습 노트 10. Map용량 감소
서버 오류 디자인
Node Manager 에 심 박 수 를 보낸다.서버 가 다운 되면 Resource Manager 영향 을 받 은 모든 Resource Manager 에 게 알려 줍 니 다.Application Master 현재 서버 에서 실행 중인 모든 작업 을 추적 합 니 다.진행 중인 작업 이 종료 되면 Node Manager 작업 을 Node Manager 로 표시 하고 작업 을 다시 시작 합 니 다 idle 에 심 박 수 를 보낸다.심장 박동 이 멈 추 면 Application Master 재 부팅 Resource Manager, Resource Manager 동시 수행 중인 퀘 스 트 정보 Application Master 잘못 사용 한 디자인Application Master, 시동 Resource Manager checkpoints 분배 요청 은 심장 박동 패 키 지 를 통 해 전송 된다.secondary Resource Manager (낙후 자)container 은 군집 에서 느 린 임 무 를 수행 하 는 것 을 말한다.모든 단계 에서 가장 느 린 임 무 를 수행 하 는 것 이 전체적인 속 도 를 결정 한다.stragglers 의 원인 은 여러 가지 가 있 을 수 있 습 니 다. 디스크 손상, 네트워크 정체, CPU 병목, 메모리 병목 입 니 다.잘못 사용 한 디자인:
straggler: 네 straggler 다른 사본 집행 speculative execuation.그 중 하나 인 던 전 straggler 이 완성 되면 전체 임 무 는 완성 으로 표 시 됩 니 다.가설
(repliacted execuation), (replica), job1 의 완성 진 도 는 각각 job2, job3, 90%, 50% 이다.10% 다른 서버 에서 실 행 됩 니 다 Application Master.그 중 하나 job3 가 완성 되면 전체 임 무 는 완성 으로 표 시 됩 니 다.지방 성 (locality)
replica 로 나 뉘 어 서로 다른 선반 에 세 부 이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
Nginx 의 설치, 업그레이드 및 간단 한 사용Nginx 설치 – prefix = / usr / local / nginx 지정 설치 경로 – user = nginx 지정 사용자 – group = nginx 지정 기본 그룹 – with - httpssl_modul...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.