Grafana Dashboard의 1Row에 여러 노드의 정보를 가로로 표시 [Grafana Templating Tips]

TL;DR



안녕하세요. nntsugu입니다.

좋아하는 Grafana Community Dashboard는 Node Exporter Server Metrics입니다.
node란에서 선택한 모든 node의 정보를 옆에 나란히 표시할 수 있으므로 편리합니다.
SaaS의 개발·운용을 하고 있으면 신경이 쓰이는 fd의 소비량을, ↑에 File descriptor 소비량 그래프를 추가해 확인하고 있습니다.
커넥션 누설이나 접속원의 처리가 늦어져, 장시간 커넥션을 계속하고 있는 케이스를 찾아내는데 편리합니다.

아래에 대해 설명합니다.

  • Node Exporter Server Metrics에 fd 소비량 표시 그래프 추가
  • 각 노드에 데이터를 표시 할 수 있도록 Templating의 Repeat Panel 설정

  • 작은 재료입니다만, Grafana 익숙하지 않다고 이해하기 어려운 설정이므로 써 보았습니다.
    Row Options의 Repeat for에 눈이 생기기 쉽고 이해하기 어렵다.
    여기까지 쓰고 있어 깨달았습니다만, 이것 Grafana 이야기군요. 글쎄요?

    하고 싶은 일



    커뮤니티 빌드 대시보드 : Node Exporter Server Metrics에 파일 설명자 행을 추가합니다.



    하단에



    추가합니다.

    절차



    1. fd 소비량 표시용 그래프 추가



    1-1) Dashboard 왼쪽 하단 ~
    "Graph"추가
    1-2) Panel Title⇢Edit 열기

    ⇒⇒

    1-3) 그래프에 표시하는 메트릭을 Metrics 지정


  • 데이터 소스에 Prometheus (※ 1) 지정
  • Query에 instance_name (※ 2) 당 node_filefd_allocated 지정

  • ※1 Data Source의 설정치는 자신의 환경의 Prometheus의 것을 지정해 주세요
    ※2 instance_name에는 Prometheus의 relabel config로 호스트명을 넣습니다

    1-4) General 탭에서 Panel Title 붙이기



    Title은 좋아합니다.

    1-5) 우단의 "X"로 그래프로 돌아온다

    로 그래프로 돌아갈 수 있습니다.

    주의 이 상태라고 편집한 내용은 보존되어 있지 않으므로, 헤더에 있는 로 현상을 보존해 두는 것도 추천입니다.

    2. 노드마다 데이터를 표시할 수 있도록 Templating의 Repeat Panel을 설정한다.



    지금까지 fd 소비량을 표시 할 수는 있지만, 아래 그림과 같이
  • UDP Stats는 노드마다 그래프가 그려져있다
  • file descriptor는 하나의 그래프에 모든 노드의 그래프가 그려져있다

  • 되어 있습니다.



    새로 만든 것도 노드마다 표시되도록 Templating의 Repeat Panel을 설정합니다.

    2-1) 다시 Panel Title⇢Edit 열기



    2-2) General 탭의 Templating > Repeat Panel에 "node"지정
     

  • Repeat Panel은 Templating (↓)으로 설정한 것을 선택할 수 있습니다



  • ↑는 헤더의 ⇢Templating에서 열립니다.

    2-3) 오른쪽 끝의 "X"로 그래프로 돌아가기

    로 그래프로 돌아갈 수 있습니다.

    2-4) 그래프 다시 그리기

    이 시점에서는 아직 변경이 반영되어 있지 않으므로 아래와 같이 됩니다.


    Template(↓)의 node를 재선택하는 등, 그래프를 재그리게 합시다.


    여기까지의 조작에 실수가 없으면, 아래와 같이 된다고 생각합니다.



    2-5) 대시 보드를 저장하고 마칩니다.

    이 상태라고 편집한 내용은 저장되어 있지 않으므로 헤더에 있는 으로 현재 상태를 저장해 둡니다.

    미안해.

    좋은 웹페이지 즐겨찾기