클 라 우 드 학습 노트 10. Map용량 감소
서버 오류 디자인
Node Manager
에 심 박 수 를 보낸다.서버 가 다운 되면 Resource Manager
영향 을 받 은 모든 Resource Manager
에 게 알려 줍 니 다.Application Master
현재 서버 에서 실행 중인 모든 작업 을 추적 합 니 다.진행 중인 작업 이 종료 되면 Node Manager
작업 을 Node Manager
로 표시 하고 작업 을 다시 시작 합 니 다 idle
에 심 박 수 를 보낸다.심장 박동 이 멈 추 면 Application Master
재 부팅 Resource Manager
, Resource Manager
동시 수행 중인 퀘 스 트 정보 Application Master
잘못 사용 한 디자인Application Master
, 시동 Resource Manager
checkpoints
분배 요청 은 심장 박동 패 키 지 를 통 해 전송 된다.secondary Resource Manager
(낙후 자)container
은 군집 에서 느 린 임 무 를 수행 하 는 것 을 말한다.모든 단계 에서 가장 느 린 임 무 를 수행 하 는 것 이 전체적인 속 도 를 결정 한다.stragglers
의 원인 은 여러 가지 가 있 을 수 있 습 니 다. 디스크 손상, 네트워크 정체, CPU 병목, 메모리 병목 입 니 다.잘못 사용 한 디자인:
straggler
: 네 straggler
다른 사본 집행 speculative execuation
.그 중 하나 인 던 전 straggler
이 완성 되면 전체 임 무 는 완성 으로 표 시 됩 니 다.가설
(repliacted execuation)
, (replica)
, job1
의 완성 진 도 는 각각 job2
, job3
, 90%
, 50%
이다.10%
다른 서버 에서 실 행 됩 니 다 Application Master
.그 중 하나 job3
가 완성 되면 전체 임 무 는 완성 으로 표 시 됩 니 다.지방 성 (locality)
replica
로 나 뉘 어 서로 다른 선반 에 세 부 이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
Nginx 의 설치, 업그레이드 및 간단 한 사용Nginx 설치 – prefix = / usr / local / nginx 지정 설치 경로 – user = nginx 지정 사용자 – group = nginx 지정 기본 그룹 – with - httpssl_modul...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.