本文在于指导如何对k8s的监控GPA(Grafana，prometheus以及alertmanager)进行安装部署。
1. 介绍
Prometheus
在真正部署Prometheus之前，应了解一下Prometheus的各个组件之间的关系及作用：
1）MertricServer：是k8s集群资源使用情况的聚合器，收集数据给K8s集群内使用，如：kubectl，hpa,scheduler；
2）PrometheusOperator：是一个系统检测和警报工具箱，用来存储监控数据；
3）NodeExporter：用于各node的关键度量指标状态数据；
4）kubeStateMetrics：收集k8s集群内资源对象数据，指定告警规则；
5）Prometheus：采用pull方式收集apiserver，scheduler，controller-manager，kubelet组件数据，通过http协议传输；
6）Grafana：是可视化数据统计和监控平台；
2. 安装部署步骤
安装git工具
#yum install git -y下载prometheus
#cd /opt
#git clone GitHub - prometheus-operator/kube-prometheus: Use Prometheus to monitor Kubernetes and applications running on Kubernetes下载到主机的/opt目录下
注意:k8s的版本v1.16.0对应的kube-prometheus版本为release-0.3
查看manifests
#cd /opt/kube-prometheus-release-0.3/manifests
修改镜像源
国外镜像源某些镜像无法拉取，需要修改prometheus-operator，prometheus，alertmanager，kube-state-metrics，node-exporter，prometheus-adapter的镜像源为国内镜像源
#sed -i 's/quay.io/quay.mirrors.ustc.edu.cn/g' setup/prometheus-operator-deployment.yaml
#sed -i 's/quay.io/quay.mirrors.ustc.edu.cn/g' prometheus-prometheus.yaml
#sed -i 's/quay.io/quay.mirrors.ustc.edu.cn/g' alertmanager-alertmanager.yaml
#sed -i 's/quay.io/quay.mirrors.ustc.edu.cn/g' kube-state-metrics-deployment.yaml
#sed -i 's/quay.io/quay.mirrors.ustc.edu.cn/g' node-exporter-daemonset.yaml
#sed -i 's/quay.io/quay.mirrors.ustc.edu.cn/g' prometheus-adapter-deployment.yaml修改service类型
为了可以从外部访问prometheus，alertmanager，grafana，需要修改promethes，alertmanager，grafana的service类型为NodePort类型。
修改prometheus的service
修改prometheus的service，修改成如图所示新增部分：
#vim prometheus-service.yaml
修改alertmanager的service
修改alertmanager的service，修改成如图所示新增部分：
#vim alertmanager-service.yaml
修改grafana的service
修改grafana的service，修改成如图所示新增部分：
#vim grafana-service.yaml
安装kube-prometheus
安装CRD和prometheus-operator
[root@k8s-master manifests]# kubectl apply -f setup/
查看prometheus-operator状态
[root@k8s-master manifests]# kubectl get pod -n monitoring
安装GPA
安装prometheus, alertmanager, grafana, kube-state-metrics, node-exporter等资源
[root@k8s-master manifests]# kubectl apply -f .
查看pods状态
下载镜像时间比较长，约半小时后，查看命名空间monitoring下面的pod状态，直到monitoring命名空间下所有pod都变为running状态，表现安装成功。
[root@k8s-master1 manifests]# kubectl get pod -n monitoring
访问GPA
访问prometheus
浏览器打开http://ip:30090，ip为k8s的node节点的IP
访问alert-manager
浏览器打开http://ip:30093,ip为k8s的node节点的IP
访问grafana
浏览器打开http://IP:32000 ip为k8s的node节点的IP
用户名/密码：admin/admin
3. 部署调试过程记录
查看pods状态
# kubectl get pods -n monitoring
Grafana：
数据源配置：
名称：prometheus
url：http://prometheus-k8s.monitoring.svc:9090
导入模板：
模板下载地址：Dashboards | Grafana Labs
模板id：315
