基于Prometheus监控Kubernetes集群

最新推荐文章于 2024-09-13 09:21:48 发布
最新推荐文章于 2024-09-13 09:21:48 发布
阅读量688 收藏
点赞数
文章标签： prometheus kubernetes 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qwertyuiop_____q/article/details/132335861
版权
本文介绍了如何在Kubernetes集群上部署Prometheus监控平台和Grafana服务。首先，详细阐述了Prometheus的工作服务过程和核心组件，接着讲解了Grafana的特点和作用。然后，逐步指导如何配置环境、部署Kubernetes集群、安装Prometheus和Grafana，包括相关YAML文件的准备和应用。最后，展示了如何配置Grafana数据源，完成监控系统的搭建。
摘要由CSDN通过智能技术生成

目录

ometheus优势

Prometheus工作服务过程

Prometheus核心组件

Prometheus实践架构图

Grafana简介

Grafana特点

一、环境准备

1.1、主机初始化配置

1.2、部署docker环境

二、部署kubernetes集群

2.1、组件介绍

2.2、配置阿里云yum源

2.3、安装kubelet kubeadm kubectl

2.4、配置init-config.yaml

2.5、安装master节点

2.6、安装node节点

2.7、安装flannel

2.8、部署测试应用

三、部署Prometheus监控平台

3.1、准备Prometheus相关YAML文件

3.2、部署prometheus

四、部署Grafana服务

4.1、部署Grafana相关yaml文件

4.2、配置Grafana数据源

Prometheus是由SoundCloud开发的开源监控报警系统和时序列数据库(TSDB)；Prometheus使用Go语言开发，是Google BorgMon监控系统的开源版本；2016年由Google发起Linux基金会旗下的原生云基金会(Cloud Native Computing Foundation), 将Prometheus纳入其下第二大开源项目；Prometheus和Heapster(Heapster是K8S的一个子项目，用于获取集群的性能数据)，相比功能更完善、更全面；Prometheus性能也足够支撑上万台规模的集群 

ometheus优势

  1. 多维度数据模型。
  2. 灵活的查询语言。
  3. 不依赖分布式存储，单个服务器节点是自主的。
  4. 通过基于HTTP的pull方式采集时序数据。
  5. 可以通过中间网关进行时序列数据推送。
  6. 通过服务发现或者静态配置来发现目标服务对象。
  7. 支持多种多样的图表和界面展示，比如Grafana等。

Prometheus工作服务过程

  1. Prometheus Daemon负责定时去目标上抓取metrics(指标)数据，每个抓取目标需要暴露一个http服务的接口给它定时抓取。Prometheus支持通过配置文件、文本文件、Zookeeper、Consul、DNS SRV Lookup服务注册与发现等方式指定抓取目标。Prometheus采用PULL的方式进行监控，即服务器可以直接通过目标PULL数据或者间接地通过中间网关来Push数据。
  2. Prometheus在本地存储抓取的所有数据，并通过一定规则进行清理和整理数据，并把得到的结果存储到新的时间序列中。
  3. Prometheus通过PromQL和其他API可视化地展示收集的数据。Prometheus支持很多方式的图表可视化，例如Grafana、自带的Promdash以及自身提供的模版引擎等等。Prometheus还提供HTTP API的查询方式，自定义所需要的输出。
  4. PushGateway支持Client主动推送metrics到PushGateway，而Prometheus只是定时去Gateway上抓取数据。
  5. Alertmanager是独立于Prometheus的一个组件，可以支持Prometheus的查询语句，提供十分灵活的报警方式。

Prometheus核心组件

Server 主要负责数据采集和存储，提供PromQL查询语言的支持 Alertmanager 警告管理器，用来进行报警

node_exporter 用来监控服务器CPU、内存、磁盘、I/O等信息

Prometheus实践架构图

    • Push Gateway 主要是实现接收由Client push过来的指标数据，在指定的时间间隔，由主程序来抓取。

Grafana简介

Grafana是一个可视化面板（Dashboard），有着非常漂亮的图表和布局展示，功能齐全的度量仪表盘和图形编辑器。支持Graphite、zabbix、InfluxDB、Prometheus和OpenTSDB作为数据源。

Grafana特点

  1. Grafana是一个可视化面板（Dashboard），有着非常漂亮的图表和布局展示，功能齐全的度量仪表盘和图形编辑器。支持Graphite、zabbix、InfluxDB、Prometheus和OpenTSDB作为数据源。
  2. Grafana支持许多不同的时间序列数据（数据源）存储后端。每个数据源都有一个特定查询编辑器。官方支持以下数据源：Graphite、infloxdb、opensdb、prometheus、elasticsearch、cloudwatch。每个数据源的查询语言和功能明显不同。你可以将来自多个数据源的数据组合到一个仪表板上，但每个面板都要绑定到属于特定组织的特定数据源。
  3. Grafana中的警报允许您将规则附加到仪表板面板上。保存仪表板时，Gravana会将警报规则提取到单独的警报规则存储中，并安排它们进行评估。报警消息还能通过钉钉、邮箱等推送至移动端。但目前grafana只支持graph面板的报警。
  4. Grafana使用来自不同数据源的丰富事件注释图表，将鼠标悬停在事件上会显示完整的事件元数据和标记；
  5. Grafana使用Ad-hoc过滤器允许动态创建新的键/值过滤器，这些过滤器会自动应用于使用该数据源的所有查询

一、环境准备

操作系统

IP地址

主机名

组件

CentOS7.5

192.168.50.53

k8s-master

kubeadm、kubelet、kubectl、docker-ce

CentOS7.5

192.168.50.51

k8s-node01

kubeadm、kubelet、kubectl、docker-ce

CentOS7.5

192.168.50.50

k8s-node02

kubeadm、kubelet、kubectl、docker-ce

注意：所有主机配置推荐CPU：2C+  Memory：2G+

1.1、主机初始化配置

所有主机配置禁用防火墙和selinux 

[root@localhost ~]#  setenforce 0

[root@localhost ~]#  iptables -F

[root@localhost ~]#  systemctl stop firewalld

[root@localhost ~]#  systemctl disable firewalld

Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.

Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.

[root@localhost ~]# systemctl stop NetworkManager

[root@localhost ~]# systemctl disable NetworkManager

Removed symlink /etc/systemd/system/multi-user.target.wants/NetworkManager.service.

Removed symlink /etc/systemd/system/dbus-org.freedesktop.nm-dispatcher.service.

Removed symlink /etc/systemd/system/network-online.target.wants/NetworkManager-wait-online.service.

[root@localhost ~]#  sed -i '/^SELINUX=/s/enforcing/disabled/' /etc/selinux/config

配置主机名并绑定hosts，不同主机名称不同

[root@localhost ~]#  hostname k8s-master

[root@localhost ~]#  bash

[root@k8s-master ~]#  cat << EOF >> /etc/hosts

> 192.168.50.53 k8s-master

> 192.168.50.51 k8s-node01

> 192.168.50.50 k8s-node02

> EOF

主机配置初始化

[root@k8s-master ~]# yum -y install vim wget net-tools lrzsz

[root@k8s-master ~]# swapoff -a

[root@k8s-master ~]# sed -i '/swap/s/^/#/' /etc/sysctl.conf

[root@k8s-master ~]#  cat << EOF >> /etc/sysctl.conf

> net.bridge.bridge-nf-call-ip6tables = 1

> net.bridge.bridge-nf-call-iptables = 1

> EOF

[root@k8s-master ~]# modprobe br_netfilter

[root@k8s-master ~]# sysctl -p

net.bridge.bridge-nf-call-ip6tables = 1

net.bridge.bridge-nf-call-iptables = 1

1.2、部署docker环境

三台主机上分别部署 Docker 环境，因为 Kubernetes 对容器的编排需要 Docker 的支持。

[root@k8s-master ~]#  wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-.repo

[root@k8s-master ~]#  yum install -y yum-utils device-mapper-persistent-data lvm2

使用 YUM 方式安装 Docker 时，推荐使用阿里的 YUM 源。

[root@k8s-master ~]# yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/dcker-ce.repo

已加载插件：fastestmirror

adding repo from: https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

grabbing file https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo to /etc/yum.repos.d/docer-ce.repo

repo saved to /etc/yum.repos.d/docker-ce.repo

[root@k8s-master ~]#  yum clean all && yum makecache fast

[root@k8s-master ~]# yum -y install docker-ce

[root@k8s-master ~]#  systemctl start docker

[root@k8s-master ~]# systemctl enable docker

Created symlink from /etc/systemd/system/multi-user.target.wants/docker.service to /usr/lib/systemd/sytem/docker.service.

最低0.47元/天 解锁文章
学习新鲜事物
关注
Prometheus监控ZooKeeper
TechEnthusiast的博客
07-24 2307
ZooKeeper是一个分布式协调服务,在分布式系统中扮演着重要角色。为了确保ZooKeeper集群的健康运行,有效的监控至关重要。本文将详细介绍如何使用Prometheus监控ZooKeeper,包括安装配置、关键指标、告警设置以及最佳实践。
自动化部署Prometheus监控Kubernetes集群实战
悦分享
08-23 289
prometheus是非常流行的监控服务，但是对于k8s的监控需要做很多接口，这导致了prometheus监控K8s比较复杂，官方就出了kube-prometheus这么一个项目，它是Prometheus operator的定制版，如果我们想获取完整的k8s服务监控指标，推荐采用kube-prometheus的方式。安装manifest目录下的所有yaml文件，kube-prometheus默认安装在monitoring命名空间中，安装过程是非常缓慢的，有些镜像在国外，还会因为拉取不到而安装失败。
Prometheus 监控K8S集群
m0_64982331的博客
06-07 781
prometheus监控kubernetes集群信息
Kubernetes精讲之prometheus
最新发布
m2282475145的博客
09-13 1317
Prometheus是一个开源的服务监控系统和时序数据库其提供了通用的数据模型和快捷数据采集、存储和查询接口它的核心组件Prometheus服务器定期从静态配置的监控目标或者基于服务发现自动配置的目标中进行拉取数据新拉取到啊的 数据大于配置的内存缓存区时，数据就会持久化到存储设备当中。
如何使用Prometheus监控Kubernetes集群
一览无遗
12-08 966
Prometheus 是一个高可伸缩的开源监控框架。它为Kubernetes容器编排平台提供了开箱即用的监控功能。此外，在可观察性领域，因其能很好的实现指标收集和告警，也被越来越多的公司和企业使用。详细介绍 Prometheus 超出了本文的范围。如果你想了解更多关于 Prometheus 的知识，你可以访问其官网（在此，我想列出几个要点供您参考。指标收集: Prometheus 使用拉取模型通过 HTTP 协议检索度量。
通过Prometheus监控ZooKeeper
qq_42016966的博客
11-24 2164
通过在ZooKeeper中埋点来暴露数据，使用Prometheus监控抓取数据，并借助Prometheus Grafana大盘来展示数据，即可实现通过Prometheus监控ZooKeeper的目的。 步骤一：启动JMX服务 首先需要在ZooKeeper中启用JMX服务以获取资源信息。 修改/opt/zk/zookeeper-3.4.10/bin/zkServer.sh，在第44行添加JMXPORT=8999。具体添加位置如下所示。 if [ "x$JMXLOCALONLY" = "x" ] then
使用prometheus监控zookeeper集群
运维打怪晋级之路
07-15 4912
使用prometheus监控zookeeper集群 1、踩过的坑 1.1、部署docker监控其中一个节点 [root@gtcq-gtmed-wm-public-02 local]# docker run -it -p 9141:9141 --name=zookeeper_exporter_m -d -v /etc/localtime:/etc/localtime carlpett/zookeeper_exporter -zookeeper 10.153.23.2:2181 依次部署其它节点后发现.
如何使用Prometheus监控Kubernetes集群_prometheus 监控 kubernetes
2401_84247341的博客
04-19 806
带有所有 Prometheus 刮削配置和警报规则的配置映射被挂载到 /etc/prometheus 位置中的Prometheus 容器中，作为 prometheus.yaml 和 prometheus.rules 文件。在此配置中，我们将Prometheus配置映射作为文件挂载到 /etc/prometheus 中，如前一节所述。通过将 Prometheus 配置外部化到 Kubernetes 配置映射，你不必在需要添加或删除配置时构建Prometheus 映像。Prometheus 的所有配置在。
Prometheus监控实践：Kubernetes集群监控
01-27
基础设施层：监控各个主机服务器资源(包括Kubernetes的Node和非Kubernetes的Node)，如CPU,内存,网络吞吐和带宽占用,磁盘I/O和磁盘使用等指标。中间件层：监控独立部署于Kubernetes集群之外的中间件，例如：MySQL、Redis、RabbitMQ、ElasticSearch、Nginx等。Kubernetes集群：监控Kubernetes集群本身的关键指标Kubernetes集群上部署的应用：监控部署在Kubernetes集群上的应用其中基础设施层监控指标的拉取肯定是来在Prometheus的node_exporter，因为我们要监控的服务器节点既包含Kube
Kubernetes集群监控之prometheus
qq_33430322的博客
04-10 239
集群监控prometheusWhat is Prometheus?FeaturesComponents(组件）Architectureprometheus官网地址参考 What is Prometheus? Prometheus是一个最初在SoundCloud上构建的开源系统监视和警报工具包。 自2012年成立以来，许多公司和组织都采用了Prometheus，该项目拥有一个非常活跃的开发人员和用户...
prometheus监控zookeeper
weixin_40689822的博客
11-22 682
1.下载（zookeeper_exporter采集器） https://github.com/carlpett/zookeeper_exporter/releases/download/v1.0.2/zookeeper_exporter 2. 传到liunx上/usr/local/prometheus目录下，没有目录可以自行创建 3.授予权限 chmod 755 zookeeper_exporter 4.查看帮助（如果提示没有权限，则执行 chmod 755 zookeeper_exporter进行授权
Prometheus+Grafana实现linux集群性能可视化监控
qq_53851863的博客
02-13 290
Prometheus+Grafana实现多主机可视化性能监控
Prometheus监控 controller-manager scheduler etcd
weixin_45720992的博客
07-25 736
Prometheus 最初是 SoundCloud 构建的开源系统监控和报警工具，是一个独立的开源项目，于 2016 年加入了 CNCF 基金会，作为继 Kubernetes 之后的第二个托管项目
Prometheus各类中间件的监控接入
qq_41896822的博客
06-25 1254
prometheus监控生态中，各类中间件的部署
安装prometheus-0.9.0，scheduler、controller未被监控
提笔书几行?
03-15 481
3、monitoring命名空间，查看资源 servicemonitors.monitoring.coreos.com 的 kube-scheduler，查看其中的port的name字段。4、修改kube-system命名空间 scheduler的svc的kube-controller-manager，添加字段。2、kube-system命名空间 创建scheduler的svc，查看scheduler的svc的label。同时记住port的值为https-metrics，这个相当于port的name。
手工部署Prometheus监控Kubernetes集群实战
悦分享
08-24 304
Prometheus的数据指标是通过一个公开的HTTP(S)数据接口获取到的，对于一些普通的HTTP服务，我们添加一个/metrics接口暴露给Prometheus即可，现在很多服务从一开始就内置了一个/metrics接口，比如Kubernetes的各个组件都直接提供了数据指标接口，有一些服务即使没有原生集成该接口，也完全可以使用一些exporter来获取到指标数据，比如mysqld_exporter、node_exporter等。这就是Prometheus里面非常重要的服务发现功能了。
Prometheus 监控外部 Kubernetes 集群
weixin_46837396的博客
03-30 727
文章目录Prometheus 监控外部 Kubernetes 集群 Prometheus 监控外部 Kubernetes 集群 前面我们的文章中都是将 Prometheus 安装在 Kubernetes 集群中来采集数据，但是在实际环境中很多企业是将 Prometheus 单独部署在集群外部的，甚至直接监控多个 Kubernetes 集群，虽然不推荐这样去做，因为 Prometheus 采集的数据量太大，或大量消耗资源，比较推荐的做法是用不同的 Prometheus 实例监控不同的集群，然后用联邦的方式进行
Prometheus 监控 ZooKeeper
肉蛋葱鸭的博客
06-03 2698
Prometheus 监控 ZooKeeper Zookeeper的指标获取方式一般有两种，一种是Zookeeper的四字命令，另一种是使用JMX。ZooKeeper的四字命令用法在官方文档可以查到。针对JMX，Prometheus的jmx_exporter组件可以导出这些监控指标提供给Prometheus。Prometheus的exporter支持自定义，社区里面很多人开发了对接各种各样组件的exporter。除了jmx_exporter,Github上也有人做了zookeeper_exporter，有兴
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值