基于Prometheus监控Kubernetes集群

最新推荐文章于 2024-10-13 14:36:33 发布
最新推荐文章于 2024-10-13 14:36:33 发布
阅读量886 收藏 3
点赞数 3
分类专栏： 流程步骤 基础知识 文章标签： prometheus kubernetes 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/z2050025507/article/details/132335702
版权

目录

Prometheus简介

Prometheus优势

Prometheus工作服务过程

Prometheus核心组件

Prometheus实践架构图

Grafana简介

Grafana特点

一、环境准备

1.1、主机初始化配置

1.2、部署docker环境

二、部署kubernetes集群

2.1、组件介绍

2.2、配置阿里云yum源

2.3、安装kubelet kubeadm kubectl

2.4、配置init-config.yaml

2.5、安装master节点

2.6、安装node节点

2.7、安装flannel

2.8、部署测试应用

3、部署Prometheus监控平台

3.1、准备Prometheus相关YAML文件

3.2、部署prometheus

4、部署Grafana服务

4.1、部署Grafana相关yaml文件

4.2、配置Grafana数据源

Prometheus简介

        Prometheus是由SoundCloud开发的开源监控报警系统和时序列数据库(TSDB)；Prometheus使用Go语言开发，是Google BorgMon监控系统的开源版本；2016年由Google发起Linux基金会旗下的原生云基金会(Cloud Native Computing Foundation), 将Prometheus纳入其下第二大开源项目；Prometheus和Heapster(Heapster是K8S的一个子项目，用于获取集群的性能数据)，相比功能更完善、更全面；Prometheus性能也足够支撑上万台规模的集群  。官网地址：Prometheus - Monitoring system & time series databaseAn open-source monitoring system with a dimensional data model, flexible query language, efficient time series database and modern alerting approach.https://prometheus.io/

Prometheus的基本原理是通过HTTP协议周期性抓取被监控组件的状态，任意组件只要提供对应的HTTP接口就可以接入监控。这样做非常适合做虚拟化环境监控系统，比如VM、Docker、Kubernetes等。输出被监控组件信息的HTTP接口被叫做exporter 。目前互联网公司常用的组件大部分都有exporter可以直接使用，比如Varnish、Haproxy、Nginx、MySQL、Linux系统信息(包括磁盘、内存、CPU、网络等等)。目前官方最新版本为2-23.0版本。

Prometheus优势

  • 多维度数据模型。
  • 灵活的查询语言。
  • 不依赖分布式存储，单个服务器节点是自主的。
  • 通过基于HTTP的pull方式采集时序数据。
  • 可以通过中间网关进行时序列数据推送。
  • 通过服务发现或者静态配置来发现目标服务对象。
  • 支持多种多样的图表和界面展示，比如Grafana等。

Prometheus工作服务过程

  1. Prometheus Daemon负责定时去目标上抓取metrics(指标)数据，每个抓取目标需要暴露一个http服务的接口给它定时抓取。Prometheus支持通过配置文件、文本文件、Zookeeper、Consul、DNS SRV Lookup服务注册与发现等方式指定抓取目标。Prometheus采用PULL的方式进行监控，即服务器可以直接通过目标PULL数据或者间接地通过中间网关来Push数据。
  2. Prometheus在本地存储抓取的所有数据，并通过一定规则进行清理和整理数据，并把得到的结果存储到新的时间序列中。
  3. Prometheus通过PromQL和其他API可视化地展示收集的数据。Prometheus支持很多方式的图表可视化，例如Grafana、自带的Promdash以及自身提供的模版引擎等等。Prometheus还提供HTTP API的查询方式，自定义所需要的输出。
  4. PushGateway支持Client主动推送metrics到PushGateway，而Prometheus只是定时去Gateway上抓取数据。
  5. Alertmanager是独立于Prometheus的一个组件，可以支持Prometheus的查询语句，提供十分灵活的报警方式。

Prometheus核心组件

  • Server 主要负责数据采集和存储，提供PromQL查询语言的支持
  • Alertmanager 警告管理器，用来进行报警
  • Push Gateway 主要是实现接收由Client push过来的指标数据，在指定的时间间隔，由主程序来抓取。
  • node_exporter 用来监控服务器CPU、内存、磁盘、I/O等信息。

Prometheus实践架构图

 

Grafana简介

        Grafana是一个可视化面板（Dashboard），有着非常漂亮的图表和布局展示，功能齐全的度量仪表盘和图形编辑器。支持Graphite、zabbix、InfluxDB、Prometheus和OpenTSDB作为数据源。

Grafana特点

  • Grafana是一个可视化面板（Dashboard），有着非常漂亮的图表和布局展示，功能齐全的度量仪表盘和图形编辑器。支持Graphite、zabbix、InfluxDB、Prometheus和OpenTSDB作为数据源。
  • Grafana支持许多不同的时间序列数据（数据源）存储后端。每个数据源都有一个特定查询编辑器。官方支持以下数据源：Graphite、infloxdb、opensdb、prometheus、elasticsearch、cloudwatch。每个数据源的查询语言和功能明显不同。你可以将来自多个数据源的数据组合到一个仪表板上，但每个面板都要绑定到属于特定组织的特定数据源。
  • Grafana中的警报允许您将规则附加到仪表板面板上。保存仪表板时，Gravana会将警报规则提取到单独的警报规则存储中，并安排它们进行评估。报警消息还能通过钉钉、邮箱等推送至移动端。但目前grafana只支持graph面板的报警。
  • Grafana使用来自不同数据源的丰富事件注释图表，将鼠标悬停在事件上会显示完整的事件元数据和标记；
  • Grafana使用Ad-hoc过滤器允许动态创建新的键/值过滤器，这些过滤器会自动应用于使用该数据源的所有查询

一、环境准备

操作系统

IP地址

主机名

组件

CentOS7.5

192.168.2.116

k8s-master

kubeadm、kubelet、kubectl、docker-ce

CentOS7.5

192.168.2.117

k8s-node1

kubeadm、kubelet、kubectl、docker-ce

CentOS7.5

192.168.2.118

k8s-node2

kubeadm、kubelet、kubectl、docker-ce

注意：所有主机配置推荐CPU：2C+  Memory：2G+

项目拓扑

 

1.1、主机初始化配置

所有主机配置禁用防火墙和selinux 

[root@localhost ~]# setenforce 0
[root@localhost ~]# iptables -F
[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# systemctl disable firewalld
[root@localhost ~]# systemctl stop NetworkManager
[root@localhost ~]# systemctl disable NetworkManager
[root@localhost ~]# sed -i '/^SELINUX=/s/enforcing/disabled/' /etc/selinux/config

配置主机名并绑定hosts，不同主机名称不同

[root@localhost ~]# hostname k8s-master
[root@localhost ~]# bash
[root@k8s-master ~]# cat << EOF >> /etc/hosts
192.168.2.116 k8s-master
192.168.2.117 k8s-node1
192.168.2.118 k8s-node2
EOF

[root@k8s-master ~]# scp /etc/hosts 192.168.2.117:/etc/
[root@k8s-master ~]# scp /etc/hosts 192.168.2.118:/etc/

[root@localhost ~]# hostname k8s-node1
[root@localhost ~]# bash
[root@k8s-node01 ~]#

[root@localhost ~]# hostname k8s-node2
[root@localhost ~]# bash
[root@k8s-node02 ~]#

主机配置初始化

[root@k8s-master ~]# yum -y install vim wget net-tools lrzsz

[root@k8s-master ~]# swapoff -a
[root@k8s-master ~]# sed -i '/swap/s/^/#/' /etc/fstab

[root@k8s-node01 ~]# cat << EOF >> /etc/sysctl.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
[root@k8s-node01 ~]# modprobe br_netfilter
[root@k8s-node01 ~]# sysctl -p

1.2、部署docker环境

三台主机上分别部署 Docker 环境，因为 Kubernetes 对容器的编排需要 Docker 的支持。

[root@k8s-master ~]# wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo

[root@k8s-master ~]# yum install -y yum-utils device-mapper-persistent-data lvm2

使用 YUM 方式安装 Docker 时，推荐使用阿里的 YUM 源。

[root@k8s-master ~]# yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

[root@k8s-master ~]# yum clean all && yum makecache fast 

[root@k8s-master ~]# yum -y install docker-ce
[root@k8s-master ~]# systemctl start docker
[root@k8s-master ~]# systemctl enable docker
最低0.47元/天 解锁文章
爱笑的男孩0522
关注
专栏目录
自动化部署Prometheus监控Kubernetes集群实战
悦分享
08-23 292
prometheus是非常流行的监控服务，但是对于k8s的监控需要做很多接口，这导致了prometheus监控K8s比较复杂，官方就出了kube-prometheus这么一个项目，它是Prometheus operator的定制版，如果我们想获取完整的k8s服务监控指标，推荐采用kube-prometheus的方式。安装manifest目录下的所有yaml文件，kube-prometheus默认安装在monitoring命名空间中，安装过程是非常缓慢的，有些镜像在国外，还会因为拉取不到而安装失败。
手工部署Prometheus监控Kubernetes集群实战
悦分享
08-24 307
Prometheus的数据指标是通过一个公开的HTTP(S)数据接口获取到的，对于一些普通的HTTP服务，我们添加一个/metrics接口暴露给Prometheus即可，现在很多服务从一开始就内置了一个/metrics接口，比如Kubernetes的各个组件都直接提供了数据指标接口，有一些服务即使没有原生集成该接口，也完全可以使用一些exporter来获取到指标数据，比如mysqld_exporter、node_exporter等。这就是Prometheus里面非常重要的服务发现功能了。
kubernetes集群监控 Kube-Prometheus-Stack
叶青
05-08 2459
该项目开箱即用的功能，对k8s的监控指标是比较全面的，对于k8s的主要组件的运行状态如Node、Kubelet、Pod、Deployment、StatefulSet、CoreDNS、PV等资源进行了指标采集和监控，项目采用的是prometheus，并且有许多CRD资源，可以很方便通过编写yaml配置文件，来进行监控能力的扩充和告警阈值的设置。
使用 Prometheus 监控 Kubernetes 应用
测试0901-1
12-17 223
我们和大家介绍了Prometheus的数据指标是通过一个公开的 HTTP(S) 数据接口获取到的，我们不需要单独安装监控的 agent，只需要暴露一个 metrics 接口，Prometheus 就会定期去拉取数据；对于一些普通的 HTTP 服务，我们完全可以直接重用这个服务，添加一个/metrics接口暴露给 Prometheus；而且获取到的指标数据...
kubernetes部署prometheus监控
最新发布
2302_81167603的博客
10-13 1009
kubernetes部署prometheus监控
【Prometheus】监控Kubernetes
热门推荐
LoveSummer
08-12 1万+
Kubenetes是一款由Google开发的开源的容器编排工具，在Google已经使用超过15年。作为容器领域事实的标准，Kubernetes可以极大的简化应用的管理和部署复杂度。本章中，我们将介绍Kubernetes的一些基本概念，并且从0开始利用Prometheus构建一个完整的Kubernetes集群监控系统。同时我们还将学习如何通过Prometheus Operator简化在Kubernetes下部署和管理Promethues的过程。Kubenetes是一款由Google开发的开源的容器编排工具（.
Prometheus监控Kubernetes
Eistert
08-02 436
监控指标 Kubernetes本身监控 • Node资源利用率 • Node数量 • Pods数量（Node） • 资源对象状态 Pod监控 • Pod数量（项目） • 容器资源利用率 • 应用程序 准备一个kubernetes集群，目前只有一个集群。 Kubernetes是在Prometheus之外部署的。 准备就绪 监控K8s集群Pod步骤： 1、K8s RBAC授权 kubectl apply -f rbac.yaml 监控过程 监控kubernetes需要接口授权。直接访问
Kubernetes集群监控详解
Rancher
01-02 2023
介 绍 Kubernetes在Github上拥有超过4万颗星，7万以上的commits，以及像Google这样的主要贡献者。Kubernetes可以说已经快速地接管了容器生态系统，成为了容器编排平台中的真正领头羊。 理解Kubernetes和它的Abstractions 在基础设施层，Kubernetes集群好比是一组扮演特定角色的物理或虚拟机器。其中扮演Master角色的机器作为全部操作的大脑，...
如何使用Prometheus监控Kubernetes集群_prometheus 监控 kubernetes
2401_84247341的博客
04-19 812
带有所有 Prometheus 刮削配置和警报规则的配置映射被挂载到 /etc/prometheus 位置中的Prometheus 容器中，作为 prometheus.yaml 和 prometheus.rules 文件。在此配置中，我们将Prometheus配置映射作为文件挂载到 /etc/prometheus 中，如前一节所述。通过将 Prometheus 配置外部化到 Kubernetes 配置映射，你不必在需要添加或删除配置时构建Prometheus 映像。Prometheus 的所有配置在。
Prometheus监控kubernetes
攻城狮JasonLong的博客
12-21 1237
通过Prometheus监控kubernetes
Prometheus(七)——监控kubernetes
qq_40859395的博客
04-16 2182
Prometheus监控kubernetes集群 当使用Deployment管理和部署应用程序时，用户可以方便了对应用进行扩容或者缩容，从而产生多个Pod实例。为了能够统一管理这些Pod的配置信息，在Kubernetes中可以使用ConfigMaps资源定义和管理这些配置，并且通过环境变量或者文件系统挂载的方式让容器使用这些配置。 这里将使用ConfigMaps管理Prometheus的配置文件，创建prometheus-config.y
prometheus docker 容器监控 k8s kubernetes
06-06
prometheus docker 容器监控 k8s kubernetes 好东西 岗岗的
Prometheus监控实践：Kubernetes集群监控
01-27
基础设施层：监控各个主机服务器资源(包括Kubernetes的Node和非Kubernetes的Node)，如CPU,内存,网络吞吐和带宽占用,磁盘I/O和磁盘使用等指标。中间件层：监控独立部署于Kubernetes集群之外的中间件，例如：MySQL、Redis、RabbitMQ、ElasticSearch、Nginx等。Kubernetes集群：监控Kubernetes集群本身的关键指标Kubernetes集群上部署的应用：监控部署在Kubernetes集群上的应用其中基础设施层监控指标的拉取肯定是来在Prometheus的node_exporter，因为我们要监控的服务器节点既包含Kube
Kubernetes 系列（五）:Prometheus监控框架简介
weixin_30646315的博客
03-31 231
由于容器化和微服务的大力发展，Kubernetes基本已经统一了容器管理方案，当我们使用Kubernetes来进行容器化管理的时候，全面监控Kubernetes也就成了我们第一个需要探索的问题。我们需要监控kubernetes的ingress、service、deployment、pod......等等服务，以达到随时掌握Kubernetes集群的内部状况。 此文章是Prometheus监控系列...
prometheus监控k8s集群
这是一个将要崛起小达人
08-03 1178
k8s监控
【kubernetes】基于prometheus的监控
追寻梦想的青春
10-05 500
所以，如果只部署上面的yaml文件，本身并没有部署任何跟监控相关的组件，只是让k8s中多了一些资源的类型，但是这些资源的变化需要operator控制器去执行一些操作，例如，如果需要部署prometheus，就需要创建Prometheus资源，在创建这些后，prometheus-operator就会去部署prometheus；容器的监控依赖cAdvisor组件，该组件会获取容器维度的指标数据，包含容器的CPU、文件读写、内存、网络、线程等指标，当前该组件已经集成到kubelet中，可以直接访问。
Prometheus 轻松实现集群监控
qq_40907977的博客
03-09 1178
1、Prometheus 对比 Zabbix 和 Zabbix 类似，Prometheus 也是一个近年比较火的开源监控框架，和 Zabbix不同之处在于 Prometheus 相对更灵活点，模块间比较解耦，比如告警模块、代理模块等等都可以选择性配置。服务端和客户端都是开箱即用，不需要进行安装。Zabbix则是一套安装把所有东西都弄好，很庞大也很繁杂。 Zabbix 的客户端 agent 可以比较...
Prometheus监控kubernetes集群有几种方法
03-25
A：在Kubernetes中，有多种方法可以监控整个集群，其中包括以下几种方法： 1. 使用Kubernetes原生的监控工具：Kubernetes提供了一组原生的监控工具，包括Kubelet、kube-state-metrics和Heapster等，可以监控集群的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

爱笑的男孩0522

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值