k8s实战之部署Prometheus+Grafana可视化监控告警平台

2022-02-18 00:00:00 数据 自己的 部署 告警 监控

写在前面

之前部署web网站的时候，架构图中有一环节是监控部分，并且搭建一套有效的监控平台对于运维来说非常之重要，只有这样才能更有效率的保证我们的服务器和服务的稳定运行，常见的开源监控软件有好几种，如zabbix、Nagios、open-flcon还有prometheus,每一种有着各自的优劣势，感兴趣的童鞋可以自行百度，但是与k8s集群监控，相对于而已更加友好的是Prometheus，今天我们就看看如何部署一套Prometheus全方位监控K8S

主要内容

  • 1.Prometheus架构
  • 2.K8S监控指标及实现思路
  • 3.在K8S平台部署Prometheus
  • 4.基于K8S服务发现的配置解析
  • 5.在K8S平台部署Grafana
  • 6.监控K8S集群中Pod、Node、资源对象
  • 7.使用Grafana可视化展示Prometheus监控数据
  • 8.告警规则与告警通知

1 Prometheus架构

Prometheus 是什么

Prometheus（普罗米修斯）是一个初在SoundCloud上构建的监控系统。自2012年成为社区开源项目，拥有非常活跃的开发人员和用户社区。为强调开源及独立维护，Prometheus于2016年加入云原生云计算基金会（CNCF），成为继Kubernetes之后的第二个托管项目。
官网地址:
https://prometheus.iohttps://github.com/prometheus

Prometheus 组成及架构



  • Prometheus Server：收集指标和存储时间序列数据，并提供查询接口
  • ClientLibrary：客户端库
  • Push Gateway：短期存储指标数据。主要用于临时性的任务
  • Exporters：采集已有的第三方服务监控指标并暴露metrics
  • Alertmanager：告警
  • Web UI：简单的Web控制台
    数据模型
    Prometheus将所有数据存储为时间序列；具有相同度量名称以及标签属于同一个指标。
    每个时间序列都由度量标准名称和一组键值对（也成为标签）标识。时间序列格式：

{=, …}示例：api_http_requests_total{method=”POST”, handler=”/messages”}

作业和实例

实例：可以抓取的目标称为实例（Instances）
作业：具有相同目标的实例集合称为作业（Job）
scrape_configs:
-job_name: ‘prometheus’
static_configs:
-targets: [‘localhost:9090’]
-job_name: ‘node’
static_configs:-targets: [‘192.168.1.10:9090’]

2 K8S监控指标及实现思路

k8S监控指标

Kubernetes本身监控

  • Node资源利用率
  • Node数量
  • Pods数量（Node）
  • 资源对象状态

Pod监控

  • Pod数量（项目）
  • 容器资源利用率
  • 应用程序
    Prometheus监控K8S实现的架构


服务发现：
https://prometheus.io/docs/prometheus/latest/configuration/configuration/#kubernetes_sd_config

3 在K8S平台部署Prometheus

3.1集群环境

3.2 项目地址

可以直接选择git clone项目代码，也可以后面自己编写，后面的操作也会有实现代码

[root@k8s-master src]# git clone https://github.com/zhangdongdong7/k8s-prometheus.git
Cloning into 'k8s-prometheus'...
remote: Enumerating objects: 3, done.
remote: Counting objects:  (3/3), done.
remote: Total 3 (delta 0), reused 0 (delta 0), pack-reused 0
Unpacking objects:  (3/3), done.
[root@k8s-master src]# cd k8s-prometheus/
[root@k8s-master k8s-prometheus]# ls
alertmanager-configmap.yaml         kube-state-metrics-rbac.yaml             prometheus-rbac.yaml
alertmanager-deployment.yaml        kube-state-metrics-service.yaml          prometheus-rules.yaml
alertmanager-pvc.yaml               node_exporter-0.17.0.linux-amd64.tar.gz  prometheus-service.yaml
alertmanager-service.yaml           node_exporter.sh                         prometheus-statefulset-static-pv.yaml
grafana.yaml                        OWNERS                                   prometheus-statefulset.yaml
kube-state-metrics-deployment.yaml  prometheus-configmap.yaml                README.md

相关文章