以往我们提及监控通常会想到zabbix，尽管zabbix对物理机/虚拟机监控方面比较擅长，但其对容器的监控能力是偏弱的；而prometheus天然支持集群化的容器云监控，并且提供了丰富的API供扩展其功能，本文我们在k8s集群中搭建prometheus监控其资源情况，通过grafana完成监控数据的可视化查看。
1.准备安装资源
镜像准备
docker pull 以下镜像，如果有私有镜像仓库，pull后自行push到仓库备用。
- prom/node-exporter
- prom/prometheus:v2.0.0
- grafana/grafana:4.2.0
YAML准备
链接：https://pan.baidu.com/s/19hu7663pmZNHGRsAEQCLcw
提取码：bvqn
2.安装
镜像准备完毕后，将yaml文件上传到master节点
注意：grafana.yaml中ingress的host节点可以修改为自己的域名，如果无域名，则忽略不用修改
按顺序执行以下命令：
kubectl apply -f node-exporter.yaml
kubectl apply -f rbac-setup.yaml
kubectl apply -f configmap.yaml
kubectl apply -f prometheus.deploy.yml
kubectl apply -f prometheus.svc.yml
kubectl apply -f grafana.yaml
执行后过一会我们查看节点状态：
kubectl get pods -n kube-system
如下所示，各节点运行正常
node-exporter-246mv 1/1 Running 0 32s
node-exporter-8xm6t 1/1 Running 0 30s
prometheus-68545d4fd8-rscl9 1/1 Running 0 17s
grafana-core-6ff599bfdc-znql9 1/1 Running 0 4s
3.配置grafana
执行如下命令查看grafana的服务端口，如果映射了域名直接用域名即可
kubectl get svc -n kube-system
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
grafana NodePort 10.98.113.119 <none> 3000:30353/TCP 38s
我看到到映射的nodePort是30353，我们访问该地址：
http://ip30353，然后浏览器默认会跳转到login界面，我们输入默认的帐户和密码admin/admin
登录界面
添加数据源
点击Add Datasource添加prometheus数据源，如下图所示：
Name随意取，Type选择Pormetheus，Url输入http://prometheus:9090，即prometheus的服务名及服务端口，然后点击保存。
添加prometheus数据源
添加完毕后
添加k8s集群监控Dashboard
点击菜单Dashboards--->Import，如下图
导入
在导入界面，输入编号315，grafana会自动到其官网模板库中下载315编号的模板JSON进行渲染。
注意：如果你的服务器没有联网，则这里需要自行上传Json模板文件。
官方模板库地址：https://grafana.com/grafana/dashboards 里面有很多各种不同类型的软件监控的模板，315编号的模板是k8s主流的显示模板，下载地址：https://grafana.com/grafana/dashboards/315/revisions
输入编号315
输入315后，如果服务器能够自行下载模板文件，则会跳转到下面界面，数据源选择刚才创建的prometheus数据源即可，点击Import按钮。
关联我们刚才创建的prometheus数据库
如下图k8s的默认监控界面。
集群监控界面
补充：grafana支持多种软件的监控，需要安装插件，支持插件清单：
https://grafana.com/grafana/plugins?orderBy=weight&direction=asc
后记
我们还可以使用其进行指标的告警通知等，此外一些可行的扩展思路抛砖引玉：
1.将不同的监控看板界面集成到我们自己的系统中，网上有一些成功集成案例。
2.通过SimpleJson对自己业务系统的指标进行监控，需要一些简单取数的开发。
3.通过prometheus获取监控指标，放到自己业务系统中的监控或报表页面，自行实现类似grafana的功能。
