Cloudera Manager 2015년 되돌아보기

6012 단어 ClouderaManagerhadoop
Cloudera Manager Advent Calendar 2015의 14일째입니다.

Cloudera Manager(이하 CM)의 최신 버전은 12월에 출시되었습니다5.5.1. 세어 보니, 2015년은 실로 22회의 업데이트 릴리스(버그 픽스 릴리스 포함)가 있었습니다. 그 중 새로운 기능을 포함한 마이너 업데이트는 5.45.5의 두 번이었습니다. 즉 나머지 20의 릴리스는 모두 버그 픽스였던 것이군요.

본 포스트에서는 5.4와 5.5에서 추가된 새로운 기능을 소개하고 싶습니다.

참고: What's New in Cloudera Manager 5
h tp // w w. c우우라. 코 m / 콘텐 t / w w / 엔 - u s / 도쿠 멘 타치 온 / 엔 rp 리세 / ㅁ st /와 피 cs / cm r r _ 네 w_ 찬게 d_ 훗 아츠레 s. HTML

Cloudera Manager 5.4



지원 OS 추가



RHEL 6.6, CentOS 6.6이 추가되었습니다.

설치할 CDH 버전 제한



CM을 사용하여 CDH를 설치하는 경우 CDHのマイナーバージョン < CMのマイナーバージョン여야 합니다. 예를 들어 CM 5.4.x에서 지원하는 CDH 버전은 CDH 4.0.0 - 4.x.x, CDH 5.0.0 - 5.4.x이며 5.5 시스템은 지원되지 않습니다. CM 5.4부터는 지원하지 않는 이전 버전의 CDH를 처음 설치하지 못하게 하는 개선사항이 있었습니다.

참고: Product Compatibility Matrix for CDH and Cloudera Manager h tp // w w. c우우라. 코 m/콘텐 t/w w/엔-우 s/도쿠멘 타치 온/엔 rp 리세/아 st/와 피 cs/pcm_cdh_cm. HTML

역할 할당 변경 마법사



NameNode HA 구성에서 기존 NameNode, JournalNode 등이 할당된 호스트를 변경하기 위한 마법사가 추가되었습니다.

참고: Moving NameNode Roles
h tp // w w. c우우라. 코 m/콘텐 t/w w/엔-우 s/도쿠멘들 온/엔테 rp 리세/아 st/와 피 cs/아d 민_응_미_그래서_로ㄴ s. HTML

DataNode 핫스왑 지원 기능



CDH 5.4에서 HDFS-1362 - Provide volume management functionality for DataNode에서 구현된 DataNode의 핫 스왑 기능이 추가되었습니다. 이것은 디스크를 바꿀 때 DataNode 데코미션이 필요 없다는 것입니다. 디스크를 교체한 후 "데이터 디렉토리 업데이트"를 실행하면 작업이 완료됩니다.

참고: Performing Disk Hot Swap for DataNodes h tp // w w. c우우라. 코 m/콘텐 t/w w/엔-우 s/도쿠멘 타치 온/엔테 rp 리세/아 st/와 피 cs/아 d 민_d _스 p. HTML

기밀 데이터의 마스킹 기능 보조



Hadoop 클러스터의 로그 파일, Hive/Impala 쿼리에 포함되는 모든 기밀 데이터의 마스킹을 간단하게 실시할 수 있는 UI를 제공하고 있습니다.



참고: Hadoop이 취급하는 기밀 데이터 마스킹 정보 ぃ tp // 이 m/d1세_/있어 ms/후 5640403844b608c03d

클러스터 간의 설정 차이 표시 기능



CM은 여러 클러스터를 관리할 수 있지만 클러스터 간에 설정 차이를 나열할 수 있습니다. 물론 그대로 변경할 수도 있습니다.

참고: Cloudera Manager를 사용한 다중 클러스터 관리 및 설정 차이 ぃ tp // 이 m/d1세_/있어 ms/b62928에1c38f26에8바 b4

Cloudera Manager 5.5



지원 OS 추가



RHEL/CentOS 6.6, 6.7, 7.1과 Oracle Enterprise Linux 7.1이 추가되었습니다.

지원 데이터베이스 추가



백엔드에 사용할 RDBMS에 MariaDB 5.5, Oracle 12c, PostgreSQL 9.4가 추가되었습니다.

업그레이드 마법사 재시도 기능



CM을 사용하면 CDH 업그레이드도 자동화되는 것이지만, 지금까지는 스텝의 도중에 한 번 실패하면 나머지의 스텝을 수동 실행할 필요가 있었습니다. CM 5.5에서 추가된 재시도 기능을 사용하면 실패한 단계부터 다시 실행할 수 있습니다.

참고: Re-Running the Cloudera Manager Upgrade Wizard
h tp // w w. c우우라. 코 m / 콘텐 t / w w / 엔 - u s / 도쿠 멘 타치 온 / 엔 rp 리세 / ㅁ st / 토피 cs / cm_ 아 g_ 렌 _ u pg 등으로 _ ぃ ... html

경고의 Suppression 기능



CM은 정기적으로 프로세스의 상태 확인과 설정이 유효한지 확인합니다. 체크에 걸리면 경고가 표시되지만 환경이나 운영상의 이유로 대응할 필요가 없는 것도 있습니다. 이러한 메시지는 Suppress를 수행하면 향후 표시되지 않습니다. 물론, 되돌릴 수도 있습니다 (Unsuppressing).

참고: Suppressing a Health Test/Unsuppressing Health Tests h tp // w w. c우우라. 코 m/콘텐 t/w w/엔-우 s/도쿠멘 타치온/엔테 rp 리세/아 st/와 피 cs/cm_dg_에아 lth. HTML

Kafka 지원 강화



주로 다음 기능이 추가되었습니다.
  • 롤링 재시작
  • 지표의 상당한 추가
  • 기본 설정 항목 추가
  • Active Controller Broker 표시
  • 마지막으로 이것도 단지 일부입니다만, 비교적 알기 쉬운 신기능을 소개해 보았습니다. 2016년도 보다 사용하기 쉬워지도록 개선이 있을 것입니다. 기대하고 싶네요.

    좋은 웹페이지 즐겨찾기