利用grafana&prometheus 快速配置k8s监控面板 & 主机监控面板

系列文章目录

1、使用helm快速安装 grafana&prometheus
2、利用grafana&prometheus 快速配置 k8s & 主机监控
3、grafana&prometheus 快速配置报警规则及报警接收

前言

请先务必参照上篇 helm安装grafana教程，进行grafana&prometheus安装。
没有学习本课之前你可能会感觉的制作一个主机监控/k8s监控，监控面板非常耗时，即使别人提供好数据参数，那么组织聚合展示也费劲。学习完毕本课程之后感觉这是一件非常简单的事情。

设置k8s服务面板

点击Dashboard
点击下拉箭头

点击导入dashborad

这里点击设置3119

然后选择prometheus数据源

然后点击导入即可

设置node服务面板

下载对应export进程

启动服务

 wget https://github.com/prometheus/node_exporter/releases/download/v1.3.1/node_exporter-1.3.1.linux-amd64.tar.gz
tar xvf node_exporter-1.3.1.linux-amd64.tar.gz
cd node_exporter-1.3.1.linux-amd64
nohup ./node_exporter --web.listen-address=":8058" &

配置node_exporter
由于helm install之前安装没有下载源码，所以我们这次需要下载源码，然后解压更改配置后重新配置生效。

helm pull apphub/prometheus
tar xvf prometheus-10.4.0.tgz
cd prometheus/
vim values.yaml
#追加以下行
      - job_name: 'host_monitor'
        static_configs:
        - targets: ['10.74.175.24:8058']

更新配置生效

helm upgrade my .

执行效果

Release "my" has been upgraded. Happy Helming!
NAME: my
LAST DEPLOYED: Sat Jun 25 13:09:55 2022
NAMESPACE: default
STATUS: deployed
REVISION: 2
TEST SUITE: None
NOTES:
The Prometheus server can be accessed via port 80 on the following DNS name from within your cluster:
my-prometheus-server.default.svc.cluster.local


Get the Prometheus server URL by running these commands in the same shell:
  export POD_NAME=$(kubectl get pods --namespace default -l "app=prometheus,component=server" -o jsonpath="{.items[0].metadata.name}")
  kubectl --namespace default port-forward $POD_NAME 9090


The Prometheus alertmanager can be accessed via port 80 on the following DNS name from within your cluster:
my-prometheus-alertmanager.default.svc.cluster.local


Get the Alertmanager URL by running these commands in the same shell:
  export POD_NAME=$(kubectl get pods --namespace default -l "app=prometheus,component=alertmanager" -o jsonpath="{.items[0].metadata.name}")
  kubectl --namespace default port-forward $POD_NAME 9093
#################################################################################
######   WARNING: Pod Security Policy has been moved to a global property.  #####
######            use .Values.podSecurityPolicy.enabled with pod-based      #####
######            annotations                                               #####
######            (e.g. .Values.nodeExporter.podSecurityPolicy.annotations) #####
#################################################################################


The Prometheus PushGateway can be accessed via port 9091 on the following DNS name from within your cluster:
my-prometheus-pushgateway.default.svc.cluster.local


Get the PushGateway URL by running these commands in the same shell:
  export POD_NAME=$(kubectl get pods --namespace default -l "app=prometheus,component=pushgateway" -o jsonpath="{.items[0].metadata.name}")
  kubectl --namespace default port-forward $POD_NAME 9091

For more information on running Prometheus, visit:
https://prometheus.io/

更改 prometheus 服务暴露方式：参照更改 grafana 服务暴露方式，最后我们通过NodePort方式可进行Prometheus服务访问。

查看Node exporter是否生效

如果这里有host_monitor里显示up表示启动起来了。
重新配置Node Port 的Dashboard信息。


这里填写9276即可。
一起感受一下grafana的界面之美：

感觉grafana之所以如此流行离不开，它有现成丰富的Dashborad仪表盘可以选择。
https://grafana.com/grafana/dashboards/
这里有数千个精美的仪表可以选择。