基于RHEL9的Prometheus&Grafana二进制部署

已于 2024-09-20 16:51:50 修改
阅读量972 收藏 21
点赞数 16
文章标签： prometheus grafana consul
于 2024-09-14 10:36:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/PIA5A5/article/details/141928885
版权

目录

概要

整体架构流程

技术细节

一.下载Prometheus的安装包

1.Prometheus组件的配置

2.Alertmanager组件的部署

3.Node_exporter组件的部署

 二.下载安装Grafana

1.Grafana的部署

2.Grafana中文设置

3.Dashboard添加与选择 

三.接入其它监控节点

 1.少量监控节点增加

 2.Consul 集群接入

小结

概要

        本次部署采用二进制部署，虽然不像使用yum这类命令方便，但可以保证绝大部分linux系统都可以使用。过去我曾部署过一台Prometheus的虚拟机，不过由于数据迁移导致虚拟机丢失。因此目前需要重新部署一台。以下的内容就包含了，我在重新部署的流程以及会遇到的问题。

整体架构流程

      在使用二进制部署的过程中我们需要下载相应的组件。本次Prometheus由三个部分组成，Prometheus、Alertmanager、Node_exporter。以上这些组件的下载地址以及方式都会在下面的文章当中告知。最后是用于数据可视化的Grafana的安装部署。通过部署以上内容，我们就可以建立起一个最基础的数据可视化的Prometheus监控平台。在文章的最后会做一点进阶的consul集群监控。本文不做consul的详细介绍。文中会附上入门学习的链接，请自行学习。

       需要注意本次的部署均为开启防火墙状态，如果你的服务器没有开启防火墙，文中和防火墙有关的命令都可以无视跳过。selinux建议关闭，开启状态下会出现很多问题。

技术细节

资源清单

系统IP主机服务
RHEL192.168.135.110rhel1Prometheus+Alertmanager+node_exporter+Grafana
RHEL192.168.135.120rhel2node_exporter

一.下载Prometheus的安装包

Prometheus · GitHubPrometheus has 46 repositories available. Follow their code on GitHub.icon-default.png?t=O83Ahttps://github.com/prometheus       Prometheus所有的组件都可以在上述地址中下载。（Grafana属于第三方可视化工具，在后面安装的时候会写对应的下载地址。）

        如果不想自己上GitHub找组件下载，那就直接用下面的命令下载。（请先提前安装好wget）

#promethues下载
wget https://github.com/prometheus/prometheus/releases/download/v2.54.1/prometheus-2.54.1.linux-amd64.tar.gz
#node_exporter下载
wget https://github.com/prometheus/node_exporter/releases/download/v1.8.0/node_exporter-1.8.0.linux-amd64.tar.gz
#alertmanager下载
wet https://github.com/prometheus/alertmanager/releases/download/v0.27.0/alertmanager-0.27.0.linux-amd64.tar.gz
#完成下载后执行以下命令
#解压刚刚下载的tar文件
tar xvf alertmanager-0.27.0.linux-amd64.tar.gz
tar xvf node_exporter-1.8.0.linux-amd64.tar.gz
tar xvf prometheus-2.54.1.linux-amd64.tar.gz
#把三个组件移动到/opt中并重命名
mv alertmanager-0.27.0.linux-amd64 /opt/alertmanager
mv prometheus-2.54.1.linux-amd64 /opt/prometheus
mv node_exporter-1.8.0.linux-amd64 /opt/node_exporter
#创建一个prometheus用户，并且上面三个目录文件的所有人和所有组
useradd -M -s /usr/sbin/nologin prometheus
#-M 不创建家目录 -s设置无法登录
chown prometheus:prometheus -R /opt/prometheus
chown prometheus:prometheus -R /opt/alertmanager
chown prometheus:proemtheus -R /opt/node_exporter

1.Prometheus组件的配置

       如果你的防火墙是开启的就放行9090端口。如果没有开启，无视防火墙放行的命令。配置systemd启动服务文件。

firewall-cmd --add-port=9090/tcp
firewall-cmd --runtime-to-permanent

cat > /etc/systemd/system/prometheus.service << EOF
> [Unit]
Description=Prometheus
Wants=network-online.target
After=network-online.target

[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=always
ExecStart=/opt/prometheus/prometheus \
  --config.file=/opt/prometheus/prometheus.yml \
  --web.console.libraries=/opt/prometheus/console_libraries \
  --web.console.templates=/opt/prometheus/conf/consoles \
  --storage.tsdb.path=/opt/prometheus/data-prometheus \
  --storage.tsdb.retention.time=30d \
  --web.enable-lifecycle
#最后一行的配置开启热部署，以后更新配置不需要重启systemd服务

[Install]
WantedBy=multi-user.target
> EOF
#重新加载systemd
systemctl daemon-reload 
#设置开机自启，同时启动服务
systemctl enable prometheus --now
#查看服务状态
systemctl status prometheus

       如果通过上面的方式无法启动，那就直接运行ExecStart后面的启动配置，可以直观的看到出现了哪些问题导致启动失败。

启动失败：

       我这次的启动该失败就提到是因为占用了9090端口，可以在最后一行看到端口被占用。

        有些情况是，直接运行启动配置可以，但是使用systemd会失败。systemctl status 又无法看到错误信息。这个时候我们需要使用以下命令查看。

journalctl -u prometheus.service -f

       通过journalctl可以看到访问被拒绝，由此推测应该是文件权限的问题。但是前文中我们已经修改过文件的所有者。那么问题就应该是出在selinux上面。尝试关掉selinux后，问题被解决。

启动成功：

      访问IP:9090/metrics就可以看到Prometheus采集上来的指标，也可以直接访问IP:9090进入Prometheus界面。

2.Alertmanager组件的部署

        在prometheus.yml中添加alertmanager监听项。由于alertmanager和Prometheus在同一服务器上，因此IP地址可以写成localhost。否则需要填写alertmanager部署的服务器IP。

        在规则文件处新增一个“alert.yml”报警规则。

       在/opt/prometheus/目录下新增alert.yml文件，对应上述Prometheus.yml中rule_files新增的alert.yml

cat > /opt/prometheus/alert.yml << EOF
groups:
- name: Prometheus alert
  rules:
  - alert: 服务告警
    expr: up == 0
    for: 30s
    labels:
      severity: critical
    annotations:
      instance: "{{ $labels.instance }}"
      description: "{{ $labels.job }} 服务已关闭"
EOF

          通过以下命令就可以检查Prometheus.yml和alert.yml文件内容是否无误。

/opt/prometheus/promtool check config prometheus.yml

          防火墙放行端口，配置systemd启动服务文件。

firewall-cmd --add-port=9093/tcp
firewall-cmd --runtime-to-permanent

cat > /etc/systemd/system/alertmanager.service << EOF
> [Unit]
Description=Prometheus
Wants=network-online.target
After=network-online.target

[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=on-failure
ExecStart=/opt/alertmanager/alertmanager \
  --config.file=/opt/alertmanager/alertmanager.yml \
  --storage.path=/opt/alertmanager/data

[Install]
WantedBy=multi-user.target
> EOF
#重新加载systemd
systemctl daemon-reload 
#设置开机自启，同时启动服务
systemctl enable alertmanager --now
#查看服务状态
systemctl status alertmanager

         完成上述配置，执行以下命令热刷新就可以不适用systemd重启服务

curl -X POST http://192.168.135.110:9090/-/reload

         这里可以看到alert选项中已经有了刚才添加的报警项。

3.Node_exporter组件的部署

       在Prometheus.yml文件中添加如下配置。就可以实现Prometheus服务器对自己的监控了。切记targets中的引号必须是双引号。

        防火墙放行端口，配置systemd启动服务文件。

firewall-cmd --add-port=9100/tcp
firewall-cmd --runtime-to-permanent

cat > /etc/systemd/system/node_exporter.service << EOF
[Unit]
Description=Prometheus
Wants=network-online.target
After=network-online.target

[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=on-failure
ExecStart=/opt/node_exporter/node_exporter

[Install]
WantedBy=multi-user.target
EOF
#重新加载systemd
systemctl daemon-reload 
#设置开机自启，同时启动服务
systemctl enable node_exporter --now
#查看服务状态
systemctl status node_exporter

        点击Status中的Targets，就可以看到node_exporter已经把数据收集到了Prometheus中。

 二.下载安装Grafana

1.Grafana的部署

Download Grafana | Grafana LabsOverview of how to download and install different versions of Grafana on different operating systems.icon-default.png?t=O83Ahttps://grafana.com/grafana/download?pg=oss-graf&plcmt=hero-btn-1       通过上面的链接就可以访问Grafana的下载页面了，同样如果你不想访问我在下面也会贴出下载的命令。

#下载grafana
wget https://dl.grafana.com/enterprise/release/grafana-enterprise-11.2.0.linux-amd64.tar.gz
#解压grafana
tar xvf grafana-enterprise-11.2.0.linux-amd64.tar.gz
#移动到/opt目录下
mv grafana-v11.2.0 /opt/grafana
#改变目录的所有人
chown -R prometheus.prometheus /opt/grafana

        防火墙放行端口，配置systemd启动服务文件。

firewall-cmd --add-port=3000/tcp
firewall-cmd --runtime-to-permanent

cat > /etc/systemd/system/grafana.srevice << EOF
[Unit]
Description=Prometheus
Wants=network-online.target
After=network-online.target

[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=on-failure
ExecStart=/opt/grafana/bin/grafana-server \
  --config=/opt/grafana/conf/defaults.ini \
  --homepath=/opt/grafana
[Install]
WantedBy=multi-user.target
EOF
#重新加载systemd
systemctl daemon-reload 
#设置开机自启，同时启动服务
systemctl enable grafana --now
#查看服务状态
systemctl status grafana

       账号密码都是admin

2.Grafana中文设置

        修改/opt/grafana/conf/defaults.ini中的default_language的参数。

        重启Grafana即可生效

systemctl restart grafana

 3.Dashboard添加与选择 

       添加Prometheus为数据源。

       填写Prometheus的访问地址，点击页面最下面的Save&test

      通过下面的页面获得node_exporter的监控面板模板

Grafana dashboards | Grafana LabsBrowse a library of official and community-built dashboards.icon-default.png?t=O83Ahttps://grafana.com/grafana/dashboards/

       在获取方式中选择获取ID

      在按照下图的流程，粘贴刚才复制到的ID即可。

        选择面板的数据源。

        点击Import后，就会显示你的node_exporter获取到的数据。

      如果需要查看多个服务器或集群服务器的状态，推荐使用以下的Dashboard模板。（对国人非常友好的模板）

Node Exporter Dashboard 20240520 TenSunS自动同步版 | Grafana Labsicon-default.png?t=O83Ahttps://grafana.com/grafana/dashboards/8919-node-exporter-dashboard-20240520-tensuns/      导入方法和上文中所述的相同。

三.接入其它监控节点

 1.少量监控节点增加

       在static_configs中添加新的监控节点IP，给监控节点设置名字为RHEL2。

        防火墙放行端口，配置systemd启动服务文件。

firewall-cmd --add-port=9100/tcp
firewall-cmd --runtime-to-permanent

cat > /etc/systemd/system/node_exporter.service << EOF
[Unit]
Description=Prometheus
Wants=network-online.target
After=network-online.target

[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=on-failure
ExecStart=/opt/node_exporter/node_exporter

[Install]
WantedBy=multi-user.target
EOF
#重新加载systemd
systemctl daemon-reload 
#设置开机自启，同时启动服务
systemctl enable node_exporter --now
#查看服务状态
systemctl status node_exporter
#在Prometheus主节点上执行热加载
curl -X POST http://192.168.135.110/-/reload

        刷新Targets页面node_exporter项目中就会有刚刚添加的新节点。

      在HOST主机选项中也会出现刚刚添加的主机，选择需要查看的主机就可以查看对应的仪表盘。

2.Consul 集群接入

资源清单

系统IP主机服务
RHEL192.168.135.130rhel3Consul_node(主)
RHEL192.168.135.120rhel2Consul_node/node_exporter
RHEL192.168.135.110rhel1Consul_node/P+G+A+node_exporter
Debian192.168.135.100debiannode_expoter

       前文中提到在prometheus.yml文件添加每个监控节点的信息，不利于集群服务器的监控管理。现在可以通过Consul即可完成集群的监控管理。通过下面的链接可以获得下载的安装包或者直接使用我配置好的命令。

Install | Consul | HashiCorp DeveloperExplore Consul product documentation, tutorials, and examples.icon-default.png?t=O83Ahttps://developer.hashicorp.com/consul/install        Consul的原理本文不做介绍，以下内容只涉及基础的命令使用。如果想要了解可以访问下面的链接。

Consul 入门教程-腾讯云开发者社区-腾讯云微服务的框架体系中，服务发现是不能不提的一个模块。我相信了解或者熟悉微服务的童鞋应该都知道它的重要性。这里我只是简单的提一下，毕竟这不是我们的重点。我们看下面的一幅图片：icon-default.png?t=O83Ahttps://cloud.tencent.com/developer/article/1444664        以下命令需要在每个Consul_node中执行。

#下载安装包
wget https://releases.hashicorp.com/consul/1.19.2/consul_1.19.2_linux_amd64.zip
#安装解压软件
yum -y install unzip
#把压缩包中的内容解压到/usr/bin/目录中（压缩包里面只有consul有用）
unzip consul_1.19.2_linux_amd64.zip -d /usr/bin/
#防火墙放行，防火墙配置永久生效
firewall-cmd --add-port=8500/tcp
firewall-cmd --add-port=8301/tcp
firewall-cmd --add-port=8300/tcp
firewall-cmd --runtime-to-permanent

        在Prometheus.ym文件中最后添加consul节点信息。

#ip修改为自己设备的ip
cat >> /opt/prometheus/promethues.yml << EOF
  - job_name: "node_exporter_consul"
    consul_sd_configs:
      - server: 192.168.135.130:8500
      - server: 192.168.135.120:8500
      - server: 192.168.135.110:8500
    relabel_configs:
      - source_labels: [__meta_consul_service]
        regex: consul
        action: drop
EOF

        在Consul_node（主）节点130中执行以下命令，再访问192.168.135.130:8500就可以看到如下页面。

nohup consul agent -server -bootstrap -bind=192.168.135.130 -data-dir=/consul -client=192.168.135.130 -ui &

        通过以下命令让rhel1、rhel2加入到rhel3中形成集群。

#在192.168.135.110中执行以下命令
nohup consul agent -bind=192.168.135.110 -data-dir=/consul -client=192.168.135.110 -ui -retry-join=192.168.135.130 &
#在192.168.135.120中执行以下命令
nohup consul agent -bind=192.168.135.120 -data-dir=/consul -client=192.168.135.120 -ui -retry-join=192.168.135.130 &

        可以在rhel3字样的下面看到Leader，代表rhel3为主节点。

           再通过加以下命令，让debian加入到集群中的任意节点（本次我把debian注册到了rhel2中）。debian需要完成最基础的Node_expoter部署。

#防火墙放行配置永久生效
firewall-cmd --add-port=9100/tcp
firewalld-cmd --runtime-to-permanent
#下载node_exporter
wget https://github.com/prometheus/node_exporter/releases/download/v1.8.0/node_exporter-1.8.0.linux-amd64.tar.gz
#解压node_exporter
tar xvf node_exporter-1.8.0.linux-amd64.tar.gz
#移动到/opt目录下
mv node_exporter-1.8.0.linux-amd64 /opt/node_exporter
#创建用户
useradd -M -s /usr/sbin/nologin prometheus
#设置文件所属人
chown prometheus:proemtheus -R /opt/node_exporter
#配置systemd启动服务
cat > /etc/systemd/system/node_exporter.service << EOF
[Unit]
Description=Prometheus
Wants=network-online.target
After=network-online.target

[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=on-failure
ExecStart=/opt/node_exporter/node_exporter

[Install]
WantedBy=multi-user.target
EOF
#重新加载systemd
systemctl daemon-reload 
#设置开机自启，同时启动服务
systemctl enable node_exporter --now
#查看服务状态
systemctl status node_exporter
#让centos2成为rhel2下的services
curl -X PUT -d '{"id":"debian","name":"debian","address":"192.168.135.100","port":9100,"tags":["node_exporter"],"checks": [{"http":"http://192.168.135.100:9100","interval":"5m"}]}' http://192.168.135.120:8500/v1/agent/service/register

       完成上述操作后，就可以在Prometheus和Grafana中看到被监控的debian了。

        在任意consul节点执行以下命令，也可以让rhel1的node_expoter注册到rhel2的services。

curl -X PUT -d '{"id":"rhel1","name":"rhel1","address":"192.168.135.110","port":9100,"tags":["node_exporter"],"checks": [{"http":"http://192.168.135.110:9100","interval":"5m"}]}' http://192.168.135.120:8500/v1/agent/service/register

       遇到这种情况等待几分钟即可。

        想要移除rhel1只需要在任意consul节点执行以下命令即可。需要注意是从哪个consul的节点移除services，不然会报错。

curl -X PUT http://192.168.135.120:8500/v1/agent/service/deregister/rhel1

         Prometheus和Grafana还有consul的services中都没有rhel1的信息了。

小结

        在本文中介绍了Prometheus+Grafana基础的二进制部署方式。通过文中所述的方式，可以在多种linux系统中完成部署。在文章的最后提到了集群监控的方式，部署每个监控服务器的环境时会比较比较繁琐，不过种繁琐内容完全可以使用如ansible等自动化工具完成。

PIA5A5
关注
003-Grafana-二进制部署-单机
提笔书几行?
03-05 1270
Grafana-二进制部署-单机
Grafana+Zabbix+Prometheus 监控系统
weixin_30751947的博客
06-01 3437
环境说明 软件 版本 操作系统 IP地址 Grafana 5.4.3-1 Centos7.5 192.168.18.231 Prometheus 2.6.1 Centos7.5 192.168.18.232 Zabbix ...
二进制部署grafana
u014415844的博客
04-17 344
二进制文件部署grafana
Grafana二进制部署并配置prometheus数据源
weixin_44870066的博客
12-24 665
用户名/密码：admin/admin#第一次需要重置密码。输入prometheus主机的安装主机的ip地址和端口号。我的为http://192.168.0.21:9090。我的将密码修改为admin1 方便记。选择 DATA SOURCES。选择Prometheus。
grafana8二进制包安装使用
最新发布
qq_35013224的博客
06-28 1759
mysql安装完成之后，会在/var/log/mysqld.log文件中给root生成了一个临时的默认密码。第九步，配置mysql默认编码为utf-8。第七步，防火墙开放3306端口。第三步、启动mysql 服务。第五步，修改root登录密码。第二步，在线安装MySQL。第十步，重启MySQL。第四步，设置开机启动。第八步，重启防火墙。
prometheus.tar.gz
06-28
2. **prometheus-2.28.0.linux-amd64.tar.gz**：这是 Prometheus 服务器的二进制发布包，版本号为 2.28.0，适用于 Linux x86_64（64 位）平台。这个文件包含了运行 Prometheus 服务器所需的所有文件，包括可执行程序...
开源运维监控系统-Nightingale（夜莺）应用实践
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
11-27 2869
某业务系统因OS改造，原先的Zabbix监控系统推倒后未重建，本来计划用外部企业内其他监控系统接入，后又通知需要自建才能对接，考虑之前zabbix的一些不便，本次计划采用一个类Prometheus的监控系统，镜调研后发现Nightingale兼容Prometheus，又有一些其他功能增强，又在一些大的企业经过较大规模部署实践，故本次采用Nightingale作为监控系统来进行重建。
nginx自动化部署一键部署安装
04-30
- **下载安装包**: 从Nginx官方网站获取Windows二进制安装包。 - **解压安装**: 将安装包解压到指定目录，例如`C:\nginx`。 - **配置Nginx**: 修改`nginx.conf`以适应服务器环境。 - **创建启动脚本**: 创建一个...
nginx部署资料
08-23
- **Windows**：通常通过编译源代码或者使用预编译的二进制包进行安装。 3. **配置Nginx** - **配置文件结构**：Nginx的主配置文件通常是`nginx.conf`，其中包含多个块级配置，如`http`、`server`和`location`等...
二进制安装Prometheus+grafana
0100 0111 0100 1101 0000 1111 0010 1000 1001
11-28 1355
timedatectl set-timezone "Asia/Shanghai" #修改时区改为上海ntpdate "ntp.aliyun.com" #更正时间。
【Prometheus】Prometheus的二进制部署+Grafana
koeda1的博客
01-29 1454
容器的监控工具Prometheus的二进制部署和Grafana可视化工具
grafana 7 二进制安装
weixin_44093727的博客
02-09 421
介绍了grafana 7 二进制安装
二进制部署prometheus+granfana+node-exporter
惰立的博客
05-05 269
二进制部署prometheus+granfana+node-exporter
Linux|centos二进制方式安装系统和网络监控神器prometheus+grafana（装逼神器它来了）（基础篇 一）
zsk_john的技术分享专用博客
11-16 3293
以上为二进制部署Prometheus+Grafana，是不是很简单呢？这么简单的几步就有了一个酷炫的装逼运维监控神器了，对吧~~~ 后面打算写一下报警，敬请期待。
Prometheus+grafana环境搭建rabbitmq(docker+二进制两种方式安装)(二)
遇见bug的博客
03-31 1072
对我本地的一些常用法人服务进行一个监控。基本都可以根据官方文档完成搭建，因为docker和二进制方式安装各有优缺点。docker适合有容器，有网的环境，启动简单，迁移时也比较方便二进制包的方式适合无网络的环境，可以将exporter注册为系统服务来管理所以我对两种方式都进行了尝试安装，更多exporter参见基本步骤都差不多需要注意的主要是配置文件的使用。
Grafana 安装部署
ligt
08-26 1058
操作系统 版本是 CentOS 7.4 Grafana 版本是 7.0.4 参考Grafana官网文档：https://grafana.com/docs/grafana/latest/installation/rpm/#install-from-yum-repository 1、Grafana 下载&安装 下载rpm文件，并使用yum install命令安装 wget https://dl.grafana.com/oss/release/grafana-7.0.4-1.x86_64.rpm sudo
二进制部署K8S集群的详细过程
05-19
部署K8S集群需要进行以下步骤： 1. 获取K8S二进制文件：从Kubernetes官网下载适合你的操作系统的kubectl、kubelet、kubeadm等二进制文件到本地。 2. 准备物理机：准备至少3台物理机，每台机器至少2个CPU，4GB以上内存，操作系统必须是CentOS 7.x或RHEL 7.x，确保机器之间可以互相访问。 3. 安装Docker和必要的组件：在每台物理机上安装Docker和必要的组件，例如，配置防火墙规则、关闭swap分区等。 4. 部署Master节点：选择一台物理机作为Master节点，使用kubeadm初始化集群，安装kubelet和kubectl，配置Master节点网络。 5. 部署Worker节点：在剩下的物理机上依次部署Worker节点，使用kubeadm加入集群，并且安装kubelet和kubectl。 6. 部署网络插件：使用kubeadm部署网络插件，例如，Flannel或Calico等。 7. 部署Dashboard：使用kubectl安装Dashboard，并且配置Dashboard的访问权限。 以上是二进制部署K8S集群的大致步骤，具体的细节根据实际情况可能会有所不同。在部署过程中，务必注意各项配置的正确性，以确保K8S集群的正常运行。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值