一篇文章搞定Prometheus普罗米修斯监控系统的部署

最新推荐文章于 2024-04-30 16:27:04 发布
最新推荐文章于 2024-04-30 16:27:04 发布
阅读量8.9k 收藏 149
点赞数 18
分类专栏： 普罗米修斯 文章标签： mysql prometheus Grafana 运维 普罗米修斯
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45551608/article/details/119667386
版权

Prometheus普罗米修斯监控系统

一、普罗米修斯监控概述

1.1 什么是普罗米修斯监控

在这里插入图片描述

Prometheus(由go语言(golang)开发)是一开源的监控&报警&时间序列数据库的组合。 适合监控docker容器。因为kubernetes(俗称k8s)的流行带动了 prometheus的发展。

官方网站：https://prometheus.io/

二、时间序列数据

2.1 什么是序列数据

在这里插入图片描述

时间序列数据（TimeSeries Data）：按照时间顺序记录系统，设备状态变化的数据被称为时序数据。

应用的场景很多，如：

  • 无人驾驶车辆运行中要记录的经度,纬度,速度,方向,旁边物体的距离等等。每时每刻都要将数据记录下来做分析。
  • 某一个地区的各车辆的行驶轨迹数据
  • 传统证券行业实时交易数据
  • 实时运维监控数据等

2.2 时间序列数据特点

● 性能好
关系型数据库对于大规模数据的处理性能糟糕。NOSQL 可以比较好的处理大规模数据，让依然比不上时间序列数据库。

● 存储成本低
高效的压缩算法,节省存储空间,有效降低I0

Prometheus有着非常高效的时间序列数据存储方法，每个采样数据仅仅占用3.5byte左右空间，上百万条时间序列, 30秒间隔,保留60天,大概花了200多G (来自官方数据)

2.3 普罗米修斯特征

  • 多维度数据模型
  • 灵活的查询语言
  • 不依赖分布式存储,单个服务器节点是自主的
  • 以HTTP方式,通过pull模型拉去时间序列数据
  • 也可以通过中间网关支持push模型
  • 通过服务发现或者静态配置,来发现目标服务对象
  • 支持多种多样的图表和界面展示

三、普罗米修斯原理架构图

在这里插入图片描述
____Prometheus 直接或通过中介推送网关从检测的作业中抓取指标，用于短期作业。它将所有抓取的样本存储在本地，并对这些数据运行规则，以从现有数据聚合和记录新的时间序列或生成警报。Grafana或其他 API 使用者可用于可视化收集的数据。

四、普罗米修斯监控系统的部署

4.1 环境准备工作

服务器准备

服务器类型系统和IP地址备注
Prometheus服务器CentOS7.4(64 位) 192.168.80.10Prometheus
grafana服务器CentOS7.4(64 位) 192.168.80.20mariadb、node_exporter
被监控服务器CentOS7.4(64 位) 192.168.80.30Grafana

所有服务器关闭防火墙和SElinux

systemctl stop firewalld
setenforce 0

修改/etc/hosts

192.168.80.10 prometheus
192.168.80.20 grafana
192.168.80.30 client

4.2 普罗米修斯的部署

1.设置时间同步
① 所有服务器安装ntpdate

yum install ntpdate -y

在这里插入图片描述
② 进行时间同步

ntpdate cn.ntp.org.cn
date

在这里插入图片描述
2.安装普罗米修斯
下载地址：https://prometheus.io/download/ 。我这边之前下载过，直接传入就可以了。
① 传入安装包并解压

cd /opt/
rz -E				##传入安装包
tar zxvf prometheus-2.29.1.linux-amd64.tar.gz

在这里插入图片描述
② 移动并修改名

mv prometheus-2.29.1.linux-amd64 /usr/local/promethues
cd /usr/local/promethues/

在这里插入图片描述
③ 后台启动普罗米修斯

cd /usr/local/promethues/
./prometheus --config.file="/usr/local/promethues/prometheus.yml" &

netstat -napt | grep prometheus			#查看服务是否启动 端口为9090
或
lsof -i:9090

在这里插入图片描述
④ 浏览器中进行访问测试

http://192.168.80.10:9090

在这里插入图片描述

⑤ 查看 Status 中的 Targets 项。可以看到默认监控的 localhost 也就是本机。
在这里插入图片描述

在这里插入图片描述
⑥ 监控接口：通过http://服务器IP:9090/metrics可以查看监控的数据
在这里插入图片描述

4.3 普罗米修斯的 web 页面操作

① 查看cpu的运行状态（首页搜索栏中输入process_cpu_seconds_total）
在这里插入图片描述
② 点击 Graph 选项
在这里插入图片描述

4.4 监控远程 Linux 主机

① 在远程linux主机（被监控端agent1）上安装 node_exporter 组件，我这边直接上传。
官网下载地址为：https://github.com/prometheus/node_exporter/releases/download/v1.2.2/node_exporter-1.2.2.linux-amd64.tar.gz

cd /opt/
tar zxvf node_exporter-1.2.2.linux-amd64.tar.gz -C /usr/local/
cd /usr/local/
mv node_exporter-1.2.2.linux-amd64/ node_exporter

在这里插入图片描述
② 启动 node_exporter 程序

cd node_exporter/
nohup /usr/local/node_exporter/node_exporter &		#永久运行并在后台运行
netstat -natp | grep :9100							#查看端口占用情况

扩展: nohup命令:如果把启动node_exporter的终端给关闭，那么进程也会随之关闭。nohup命令会帮你解决这个问题。

在这里插入图片描述
③ 使用http协议+9100端口收集Linux主机信息
通过浏览器访问：http://192.168.80.30:9100/metrics 就可以看到 node_exporter 在被监控端手机的监控信息
在这里插入图片描述
④ 在 Prometheus 服务器的配置文件中添加被监控机器的配置段

vim /usr/local/promethues/prometheus.yml

##添加以下配置项
  - job_name: "agent1"
    static_configs:
      - targets: ["192.168.80.30:9100"]

在这里插入图片描述
⑤ 重新启动prometheus监控系统

pkill prometheus
lsof -i:9090
cd /usr/local/promethues/
./prometheus --config.file="/usr/local/promethues/prometheus.yml" &
lsof -i:9090

在这里插入图片描述

⑥ 重新回到普罗米修斯web端查看 Status 中的 Targets 项，可以看到被监控端 node_exporter 了，并且状态为 up。
在这里插入图片描述

4.5 远程监控 MySQL 数据库

① 在被监控端服务器上安装 mysqld_exporter 组件，我这边直接上传。
官方下载地址为：https://github.com/prometheus/mysqld_exporter/releases/download/v0.13.0/mysqld_exporter-0.13.0.linux-amd64.tar.gz

cd /opt/
tar zxvf mysqld_exporter-0.13.0.linux-amd64.tar.gz -C /usr/local/
cd /usr/local/
mv mysqld_exporter-0.13.0.linux-amd64/ mysqld_exporter

在这里插入图片描述
② 节省时间安装 mariadb 数据库

yum install mariadb\* -y

在这里插入图片描述
③ 开启并设置为开机自启，然后登录 mysql
在这里插入图片描述
④ 创建 mysql 账号帮刷新权限用于收集数据

grant select,replication client,process ON *.* to 'mysql_monitor'@'localhost' identified by 'abc123';
账号为：mysql_monitor
密码为：abc123

flush privileges;
exit

在这里插入图片描述

⑤ 在mysql_exporter 组件中创建配置文件，配置 mysql 信息

vim /usr/local/mysqld_exporter/.my.cnf

[client]
user=mysql_monitor
password=abc123

在这里插入图片描述
⑥ 启动 mysql_exporter 组件

cd mysqld_exporter/
./mysqld_exporter --config.my-cnf=/usr/local/mysqld_exporter/.my.cnf &

在这里插入图片描述
⑦ 回到 prometheus 服务器的配置文件里添加被监控的 mariadb 的配置段

vim /usr/local/promethues/prometheus.yml
## 添加下面三行
  - job_name: 'agent1_mariadb'
    static_configs:
      - targets: ['192.168.80.30:9104']

在这里插入图片描述

⑧ 改完配置文件后,重启服务

pkill prometheus
lsof -i:9090
./prometheus --config.file="/usr/local/promethues/prometheus.yml" &
lsof -i:9090

在这里插入图片描述
⑨ 回到web管理界面 --》点Status --》点Targets --》可以看到监控mariadb了
在这里插入图片描述

⑩ 查看 mysql 线程连接
搜索栏中输入：mysql_global_status_threads_connected 进行查看

在这里插入图片描述

五、Grafana可视化图形工具

5.1 什么是Grafana

在这里插入图片描述

Grafana是一个开源的度量分析和可视化工具，可以通过将采集的数据分析，查询，然后进行可视化的展示,并能实现报警。

5.2 使用Grafana连接Prometheus

① 在grafana服务器上安装 grafana，我这边之前下载过，直接上传
官方下载地址:https://grafana.com/grafana/download

cd /opt/
rz -E
rpm -ivh grafana-5.3.4-1.x86_64.rpm 
systemctl start grafana-server
systemctl enable grafana-server
lsof -i:3000

在这里插入图片描述
② 通过浏览器访问 http:// grafana服务器IP:3000就到了登录界面,使用默认的admin用户,admin密码就可以登陆了
在这里插入图片描述

③ 重新修改密码为：abc123
在这里插入图片描述
④ 把 prometheus 服务器收集的数据做为一个数据源添加到 grafana,让 grafana 可以得到 prometheus 的数据
在这里插入图片描述
在这里插入图片描述

部分选项解释
Auth项：公网传输数据加密与验证用的，我们这边暂时不需要设置
Advanced HTTP Settings项：15秒获取一次数据，GET方式

在这里插入图片描述
⑤ 为添加好的数据源做图形显示（查看被监控端1分钟、5分钟和15分钟的负载情况）
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
⑥ 匹配条件显示（根据IP或普罗米修斯里面设置的job）
在这里插入图片描述

5.3 Grafana图形显示MySQL监控数据

① 在 grafana 上修改配置文件,并下载安装mysql监控的 dashboard（包含相关json文件，这些json文件可以看作是开发人员开发的一个监控模板)，我这边直接上传。
官方下载网址: https://github.com/percona/grafana-dashboards

vim /etc/grafana/grafana.ini

[dashboards.json] 
enabled = true 
path = /var/lib/grafana/dashboards


git clone https://github.com/percona/grafana-dashboards.git

在这里插入图片描述

② 下载json模板并上传到 grafana 服务器后解压缩
参考网址: https://github.com/percona/grafana-dashboards
在这里插入图片描述

unzip grafana-dashboards-main.zip

在这里插入图片描述

③ 复制到/var/lib/grafana目录下并改名，然后重启服务

cp -r grafana-dashboards-1.17.4/ /usr/lib/grafana/
systemctl restart grafana-server.service

在这里插入图片描述
在这里插入图片描述

④ 把下载压缩包在本地解压
在这里插入图片描述
⑤ 在grafana图形界面导入相关json文件
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

⑥ 点import导入后,报prometheus数据源找不到,因为这些json文件里默认要找的就是叫Prometheus的数据源，但我们前面建立的数据源却是叫 prometheus_data ，修改之前数据源的名称即可。

在这里插入图片描述
⑦ 修改完数据源名称后再次查看
在这里插入图片描述
在这里插入图片描述
⑧ 数据展示完成（过段时间再看，加载完成就会数据显示了）
在这里插入图片描述

六、 Grafana+onealert报警

prometheus报警需要使用alertmanager这个组件，而且报警规则需要手动编写(对运维来说不友好)。所以我这里选用grafana+onealert报警。
注意: 实现报警前把所有机器时间同步再检查一遍.

再次所有服务器同步时间
在这里插入图片描述

6.1 注册账号并获取key

② 先在onealert里添加grafana应用，需要先申请onealert账号。
官方网站：https://caweb.aiops.com/#/
在这里插入图片描述

③ 在新建应用中找到 grafana 应用 ，填好名字后保存获取应用key

在这里插入图片描述
然后可以看到配置步骤
在这里插入图片描述

6.2 配置通知策略

① 在 Grafana 中创建 Notification channel，选择类型为 Webhook；
a. 将第一步中生成的Webhook URL填入Webhook settings Url；

URL格式：
http://api.aiops.com/alert/api/event/grafana/v1/4065f3ce446841ca859d41c675286833/

b. Http Method选择POST；
c. Send Test&Save；

在这里插入图片描述
在这里插入图片描述

6.3 将配置的Webhook Notification Channel添加到Grafana Alert中

① 选择我们之前创建的cpu监控，点击Edit进行编辑
在这里插入图片描述
② 填写name 和 IS above
在这里插入图片描述
③ 现在发送的对象和发送的信息
在这里插入图片描述
④ 保存并自定义个名字
在这里插入图片描述

6.4 CPU告警测试

⑤ 现在可以去设置一个报警来测试了(这里以我们前面加的cpu负载监控来做测试)
在被监控端的agent执行测试命令cat /dev/urandom | md5sum
在这里插入图片描述

⑥ 等待一会，可以看到grafana监控页面CPU负载超过0.5了
在这里插入图片描述
⑦ 这个时候会收到邮件提示
在这里插入图片描述

七、总结报警不成功的可能原因

  1. 各服务器之间时间不同步，这样时序数据会出问题，也会造成报警出问题
  2. 必须写通知内容，留空内容是不会发报警的
  3. 修改完报警配置后，记得要点右上角的保存
  4. 保存配置后，需要由OK状态变为alerting状态才会报警(也就是说，你配置保存后，就已经是alerting状态是不会报警的)
  5. grafana与onealert通信有问题
码海小虾米_
关注
  • 18
    点赞
  • 踩
  • 149
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 4
    评论
专栏目录
Promethus(普罗米修斯）监控系统
10-23
Promethus(普罗米修斯）监控系统 安装prometheus服务器 安装node_exporter监控远程linux 安装mysqld_exporter监控远程mysql数据库 安装grafana grafana添加监控cpu负载的图形 grafana+onealert实现报警
基于Prometheus+Grafana搭建监控平台（Windows/Linux环境exporter部署）
喜欢历史的码农
01-08 6540
在prometheus.yaml中配置了 【- targets: ["127.0.0.1:9090"]】之后，就可以读取一些默认的指标信息。这里的 State 是 “UP” 表示该组件是否正常启动，因为这是读取Prometheus本身，只要能进入该界面，就必定是 “UP”。后续如果添加了对 Exporeter（比如：windows-exporter）的配置，那么从这个 State 可以看到对应的 exporter 是否被 Prometheus 正常监听到。
Prometheus + Grafana 监控解决方案介绍及部署
m0_58833554的博客
03-12 1090
Prometheus + Grafana 监控解决方案介绍及部署
监控部署---普罗米修斯+grafana (超详细)
Zisson_no_error的博客
06-07 6849
以验证成功，部署一步到位，自己一步一步编写的文章！觉得有效的请点个赞
Docker 部署普罗米修斯监控
zhuzhibo666的博客
06-15 2893
目前互联网公司常用的组件大部分都有exporter可以直接使用，比如Varnish、Haproxy、Nginx、MySQL、Linux 系统信息 (包括磁盘、内存、CPU、网络等等)，具体支持的源看：https://github.com/prometheus。Prometheus基本原理是通过HTTP协议周期性抓取被监控组件的状态，这样做的好处是任意组件只要提供HTTP接口就可以接入监控系统，不需要任何SDK或者其他的集成过程。Grafana是一个开源的功能丰富的数据可视化平台，通常用于时序数据的可视化。
系统监控——prometheus(普罗米修斯)的部署
S_K15的博客
08-07 5572
系统监控——prometheus的部署一、prometheus简介1、优点2、组件3、架构二、环境包准备三、安装运行四、网页访问五、安装图形化界面 一、prometheus简介 prometheus 是一套开源的系统监控报警框架。 1、优点 强大的多维度数据模型 灵活而强大的查询语句（PromQL）：在同一个查询语句，可以对多个 metrics 进行乘法、加法、连接、取分数位等操作。 易于管理： Prometheus server 是一个单独的二进制文件，可直接在本地工作，不依赖于分布式存储。 高效：平均
简单的普罗米修斯安装
02-15
简单的普罗米修斯安装 运行kubectl apply -f prometheus.yaml 将注释添加到您希望Prometheus收集的部署中。 将端口（ 8080 ）和路径（ /metrics ）替换为您的pod公开的正确端口和路径。 apiVersion: apps/v1 kind: Deployment metadata: name: web labels: comp: web spec: replicas: 1 revisionHistoryLimit: 2 selector: matchLabels: comp: web template: metadata: labels: comp: web annotations: prometheus.io/path:
部署Prometheus监控（普罗米修斯）
W--\\_//的博客
11-26 5189
普罗米修斯 Prometheus部署
【IT运维】普罗米修斯基本介绍及监控平台部署（Prometheus+Grafana）
热门推荐
FixPng的博客
05-28 1万+
Prometheus(由go语言开发)是一套开源的监控&报警&时间序列（按照时间排序）数据库的组合。适合监控docker 容器。因为kubernetes(俗称k8s)的流行带动了prometheus的发展。它可以监控主机，服务，容器，支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。时间序列数据(TimeSeries Data) : 按照时间顺序记录系统、设备状态变化的数据被称为时序数据。最常见的就是我们系统中的日志。
prometheus普罗米修斯安装部署
forlorn_mere的博客
06-27 9490
介绍prometheus的安装部署和使用Grafana去达到可视化的监控目的
Prometheus+Grafana监控部署
u010554181的博客
11-28 1367
个人部署Prometheus+Grafana监控系统过程记录，仅供参考
Prometheus（普罗米修斯）监控系统
09-12
Prometheus（普罗米修斯）监控系统。 一篇文章带你快速了解！
Prometheus监控平台搭建部署
04-11
Prometheus监控平台搭建部署
Prometheus监控系统工具全家桶+课件pdf.zip
06-25
普罗米修斯 监控平台搭建 完整课件 及 工具全家桶
完美的分布式监控系统——普罗米修斯
02-24
希腊神话中，普罗米修斯是最具智慧的神明之一，是泰坦巨神后代，其名字意思为"先见之明"，那么以该名字命名的监控系统究竟怎么样呢？今天虫虫给大家讲讲这个以神之名命名的监控系统。Prometheus是一个时间序列数据库
MySQL —— 表的基本操作
最新发布
学习C++的小陈同学
04-30 523
本篇整理了和表结构相关的各种基本操作（增删查改等等）
【MySQL】1.安装与配置
2301_79719531的博客
04-28 868
文件的安全性问题。文件不利于数据查询和管理。文件不利于存储海量数据。文件在程序中控制不方便。数据库存储介质：磁盘+内存。为了解决上述问题，专家们设计出更加利于管理数据的软件——数据库，他能更加有效的管理数据。数据库可以提供远程服务，即通过远程连接来使用数据库，因此也称为数据库服务器。
MySQL的数据备份和恢复
本科在读，致力于Linux/C++方向的学习，同时涉及数据结构与算法，操作系统，数据库mysql等等
04-28 691
本博客主要内容涉及到mysql数据库的备份和恢复
基于springboot+vue+Mysql的生鲜交易系统
老卓爱爪哇 的博客
04-29 1060
理员使用本系统涉到的功能主要有：首页，个人中心，用户管理，商家管理，生鲜信息管理，生鲜分类管理，广告信息管理，生鲜仓库管理，生鲜出库管理，管理等功能。商家使用本系统涉到的功能主要有：首页，个人中心，生鲜信息管理，广告信息管理，生鲜仓库管理，生鲜出库管理，订单管理等功能。用户主要包括首页、个人中心功能。
prometheus监控Pod的部署
03-31
要在Kubernetes中使用Prometheus监控Pod，需要执行以下步骤： 1. 安装Prometheus Operator：可以使用Helm chart或kubectl apply命令安装Prometheus Operator。它将创建必要的CRDs和服务，以便Prometheus可以与Kubernetes API交互。 2. 创建Prometheus实例：使用Prometheus CRD定义创建Prometheus实例，它将指定Prometheus监控的目标和规则。 3. 部署Exporter：Exporter是一种收集指标的代理，可以将指标导出到Prometheus中。可以使用Prometheus Operator创建Exporter的部署，也可以使用自己的部署。 4. 部署应用程序：部署应用程序并在其Pod配置中使用Prometheus注释（例如prometheus.io/scrape: 'true'）启用监控。 5. 检查指标：在Prometheus UI中检查指标是否被成功收集。 6. 创建监控规则：根据需要创建Prometheus规则，以便在出现异常时进行警报。 以上是基本的步骤，但是实际部署可能需要更多的配置和调整，以满足特定的需求。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

码海小虾米_

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值