监控搭建-Prometheus

于 2023-10-09 18:04:25 发布
阅读量284 收藏
点赞数
文章标签： prometheus
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shallow72/article/details/133709254
版权

监控搭建-Prometheus

1、背景

随着项目信息化进程的推进，操作系统、中间件、数据库的运维随着系统规模的扩大而指数级别提升，信息数据的监控在这个阶段显得尤为重要。俗话说：无监控、不运维，监控系统地位不言而喻。

2、目标

搭建一套监控系统对云服务器、数据库、中间件进行性能指标的有效话监控。

3、选型

在这里插入图片描述
本着选新不选旧的原则，Prometheus

4、Prometheus

4.1、介绍

Prometheus 是一款基于时序数据库的开源监控告警系统，非常适合Kubernetes集群的监控。Prometheus的基本原理是通过HTTP协议周期性抓取被监控组件的状态，任意组件只要提供对应的HTTP接口就可以接入监控。不需要任何SDK或者其他的集成过程。这样做非常适合做虚拟化环境监控系统，比如VM、Docker、Kubernetes等。输出被监控组件信息的HTTP接口被叫做exporter 。目前互联网公司常用的组件大部分都有exporter可以直接使用，比如Varnish、Haproxy、Nginx、MySQL、Linux系统信息(包括磁盘、内存、CPU、网络等等)。Promethus有以下特点：

  • 支持多维数据模型：由度量名和键值对组成的时间序列数据
  • 内置时间序列数据库TSDB
  • 支持PromQL查询语言，可以完成非常复杂的查询和分析，对图表展示和告警非常有意义
  • 支持HTTP的Pull方式采集时间序列数据
  • 支持PushGateway采集瞬时任务的数据
  • 支持服务发现和静态配置两种方式发现目标
  • 支持接入Grafana

4.2、架构

在这里插入图片描述

4.3、构件

prometheus server 是 Prometheus 组件中的核心部分，负责实现对监控数据的获取，存储以及查询。

exporter 简单说是采集端，通过 http 服务的形式保留一个 url 地址，prometheus server 通过 访问该 exporter 提供的 endpoint 端点，即可获取到需要采集的监控数据 。

AlertManager 在 prometheus 中，支持基于 PromQL 创建告警规则，如果满足定义的规则，则会产生一条 告警信息，进入 AlertManager 进行处理。可以集成邮件，微信或者通过 webhook 自定义报 警。

Pushgateway 由于 Prometheus 数据采集采用 pull 方式进行设置的， 内置必须保证 prometheus server 和 对应的 exporter 必须通信，当网络情况无法直接满足时，可以使用 pushgateway 来进行中转， 可以通过 pushgateway 将内部网络数据主动 push 到 gateway 里面去，而 prometheus 采用 pull 方式拉取 pushgateway 中数据。

4.4、运行机制

prometheus 负责从 pushgateway 和 job 中采集数据， 存储到后端 Storatge 中，可以通过 PromQL 进行查询， 推送 alerts 信息到 AlertManager。 AlertManager 根据不同的路由规则 进行报警通知。

4.5、环境介绍

序号项目版本备注
1Architecturex86_64服务器架构
2CentOS7.9.2009操作系统
3Prometheus2.47.0监控平台
4Grafana10.1.2图形化界面
5Node_exporter1.6.1Linux系统采集模块
6AlertManager0.26.0告警模块
7consul_exporter0.9.0自动服务发现模块

4.6、数据准备

数据准备为需要部署的程序的安排包，其中服务器架构和操作系统，未提供安装包情况，下载包获取路径主要为Promethues官网和Grafana官网下载获取。如果使用服务器直接下载太慢，可以使用磁力或其他下载工具下载后上传至服务器。

4.7、网络策略

网络策略主要为需要为服务放行的端口策略，分为服务器端口放行和安全设备端口放行

服务端口备注
Prometheus9090监控平台
node_exporter9100主机数据采集
Grafana3000Grafana图形界面

4.7.1、主机端口放行

防火墙设置

# 查看防火墙状态
systemctl status firewalld
# 启动防火墙
systemctl start firewalld
# 关闭防火墙
systemctl stop firewalld
# 重启防火墙
systemctl restart firewalld
# 设置开机启动
systemctl enable firewalld
# 设置开机不启动
systemctl disable firewalld

端口放行

firewall-cmd --zone=public --add-port=9090/tcp --permanent
# 说明
# -zone # 作用域
# -add-port=9090/tcp # 添加端口，格式为：端口/通讯协议
# -permanent 永久生效，没有此参数重启后失效

# 生效配置
firewall-cmd --reload

# 查看放行生效的端口
firewall-cmd --list-ports

放行端口关闭(此处不需要，了解即可)

firewall-cmd --zone=public --remove-port=9090/tcp --permanent

4.7.2、设备端口放行

云主机安全产品一般在安全组内放行，实体服务器一版在防火墙或者路由器设备进行放行。

4.8、部署

进入程序所在目录并解压软件包

cd /home
tar xf prometheus-2.47.0.linux-amd64.tar.gz

部署

mv prometheus-2.47.0.linux-amd64 /usr/local/prometheus-2.47.0

创建符号链接

ln -s /usr/local/prometheus-2.47.0 /usr/local/prometheus

创建prometheus存储目录

mkdir /usr/local/prometheus/data

创建服务文件

vi /usr/lib/systemd/system/prometheus.service

[Unit]
Description=https://prometheus.io

[Service]
Restart=on-failure
ExecStart=/usr/local/prometheus/prometheus \
--storage.tsdb.path=/usr/local/prometheus/data \
--config.file=/usr/local/prometheus/prometheus.yml

[Install]
WantedBy=multi-user.target

启动prometheus服务

systemctl start prometheus

查看prometheus服务

# systemctl status prometheus
● prometheus.service - https://prometheus.io
   Loaded: loaded (/usr/lib/systemd/system/prometheus.service; disabled; vendor preset: disabled)
   Active: active (running) since Sat 2023-09-23 14:37:38 CST; 3h 35min ago
 Main PID: 4243 (prometheus)
   CGroup: /system.slice/prometheus.service
           └─4243 /usr/local/prometheus/prometheus --storage.tsdb.path=/usr/local/prometheus/data --config....

Sep 23 14:37:38 devops prometheus[4243]: ts=2023-09-23T06:37:38.549Z caller=head.go:760 level=info comp...nt=0
Sep 23 14:37:38 devops prometheus[4243]: ts=2023-09-23T06:37:38.549Z caller=head.go:797 level=info comp…8827ms
Sep 23 14:37:38 devops prometheus[4243]: ts=2023-09-23T06:37:38.551Z caller=main.go:1045 level=info fs_...AGIC
Sep 23 14:37:38 devops prometheus[4243]: ts=2023-09-23T06:37:38.551Z caller=main.go:1048 level=info msg...ted"
Sep 23 14:37:38 devops prometheus[4243]: ts=2023-09-23T06:37:38.551Z caller=main.go:1229 level=info msg....yml
Sep 23 14:37:43 devops prometheus[4243]: ts=2023-09-23T06:37:43.603Z caller=main.go:1266 level=info msg="Co…µs
Sep 23 14:37:43 devops prometheus[4243]: ts=2023-09-23T06:37:43.603Z caller=main.go:1009 level=info msg...ts."
Sep 23 14:37:43 devops prometheus[4243]: ts=2023-09-23T06:37:43.603Z caller=manager.go:1009 level=info ......"
Sep 23 17:38:09 devops prometheus[4243]: ts=2023-09-23T09:38:09.607Z caller=compact.go:523 level=info c...68ms
Sep 23 17:38:09 devops prometheus[4243]: ts=2023-09-23T09:38:09.611Z caller=head.go:1298 level=info com...09ms
Hint: Some lines were ellipsized, use -l to show in full.

查看服务端口

服务文件方式查看

cat /usr/local/prometheus/prometheus.yml

# my global config
global:
  scrape_interval: 15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.
  evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.
  # scrape_timeout is set to the global default (10s).

# Alertmanager configuration
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # - alertmanager:9093

# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
  # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
  - job_name: "prometheus"

    # metrics_path defaults to '/metrics'
    # scheme defaults to 'http'.

    static_configs:
      - targets: ["localhost:9090"]

其中targets: [“localhost:9090”]处为设置的prometheus服务使用的端口

进程占用端口查看

# netstat -nltp|grep prometheus
tcp6       0      0 :::9090                 :::*                    LISTEN      4243/prometheus

查看端口占用为9090

4.9、验证

浏览器中输入配置服务器的IP地址和9090

http://ip:9090
在这里插入图片描述
点击菜单Status—Targets 查看prometheus部署的目标服务的信息

4.10、配置

配置文件介绍

vi /usr/local/promethues/prometheus.yml

# my global config
global:
  scrape_interval: 15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.
  evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.
  # scrape_timeout is set to the global default (10s).

# Alertmanager configuration
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # - alertmanager:9093

# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
  # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
  - job_name: "prometheus"

    # metrics_path defaults to '/metrics'
    # scheme defaults to 'http'.

    static_configs:
      - targets: ["localhost:9090"]

配置文件查看

启动配置会加载配置文件，启动之前使用如下命令查看配置文件的正确性

cd /usr/local/prometheus
./promtool check config prometheus.yml
Checking prometheus.yml
 SUCCESS: prometheus.yml is valid prometheus config file syntax

以上为prometheus平台的搭建，后续会针对主机、数据库和中间件的监控进行进一步的设置和使用。

水步天
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
监控之Prometheus
guoguopython的博客
02-23 967
文章目录一、Prometheus是什么？二、概念1.微服务架构思想2.读入数据总结 一、Prometheus是什么？ Prometheus是一个开源的系统监控和报警系统，现在已经加入到CNCF基金会，成为继k8s之后第二个在CNCF托管的项目，在kubernetes容器管理系统中，通常会搭配prometheus进行监控，同时也支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。 二、概念 1.微服务架构思想 优点： 1.易于开发和维
Prometheus监控
Wan_JF的博客
12-10 2982
引言 一、常用监控简介 1、Cacti Cacti(英文含义为仙人掌〉是一套基于 PHP、MySQL、SNMP和 RRDtool开发的网络流量监测图形分析工具。 它通过snmpget来获取数据，使用RRDTool绘图，但使用者无须了解RRDTool复杂的参数。它提供了非常强大的数据和用户管理功能，可以指定每一个用户能查看树状结构、主机设备以及任何一张图，还可以与LDAP结合进行用户认证，同时也能自定义模板，在历史数据的展示监控方面，其功能相当不错。 Cacti通过添加模板，使不同设备的监控添加
Prometheus二进制安装服务端
weixin_46084509的博客
09-29 66
prometheus部署
基于Go实现自定义Prometheus监控指标
蜗牛沐雨
10-14 2572
使用go自定义prometheus监控指标 package main import ( "fmt" "net/http" "github.com/prometheus/client_golang/prometheus" "github.com/prometheus/client_golang/prometheus/promhttp" "log" "math/rand" "time" ) var ( counter = prometheus.NewCounter( prometheu
二进制安装Prometheus
07-23 580
二进制安装Prometheus 服务器列表： 服务器名称 操作系统 IP地址 服务 test03 Ubuntu 16.04.4 192.168.1.58 Prometheus, Alertmanager,grafana test02 Ubuntu 16.04.4 192.168.1.57 Node_exporter 1、安装prometheus Prometheus官网...
prometheus-安装使用方案
心要是孤单了，到了那里都是流浪~~~
08-18 1219
需要安装Docker 【Mysql,Redis 需要】 yum install docker 查看 Docker 是否安装成功 docker version 可通过以下命令启动 Docker 服务：Docker服务启动完毕，就可以开始使用Docker了 systemctl start docker.service　 ----------------------------------------------------------- 1.查看可用版本 do...
linux 系统下安装prometheus
云深海阔专栏
07-27 2646
1、下载prometheus源码包，下载地址： https://github.com/prometheus/prometheus/releases/download/v2.19.3/prometheus-2.19.3.linux-amd64.tar.gz 2、解压源码包 [root@localhost updates]# tar -xf prometheus-2.19.3.linux-amd64.tar.gz [root@localhost updates]# mv prometheus-2.19.
基于kube-prometheus-stack部署监控K8S告警系统资源合集
11-08
首先，`kube-prometheus-stack` 是一个由社区维护的 Helm 图表，用于快速搭建符合 Prometheus 社区最佳实践的 Kubernetes 监控堆栈。它包括 Prometheus、Prometheus Operator、Alertmanager、Grafana、Prometheus ...
docker-compose-prometheus包
04-26
【docker-compose-prometheus包】是一个基于Docker Compose的解决方案，用于快速搭建和管理Prometheus监控系统。这个压缩包包含了所有必要的配置文件和服务，旨在帮助IT运维人员在本地或云端环境中轻松部署一套全面...
k3s-monitoring：快速入门指南，可通过Prometheus Operator和kube-prometheus-stack Helm Chart在k3s集群上获得完整的监视和警报堆栈并运行
02-04
在这个快速入门指南中，我们将探讨如何在K3s集群上利用Prometheus Operator和kube-prometheus-stack Helm Chart来建立一个全面的监控和报警系统。 首先，Prometheus是一个开源的度量分析和时间序列数据库，广泛用于...
jira-prometheus-exporter:JIRA的Prometheus出口商
05-06
下载名为`jira-prometheus-exporter-master`的压缩包后，你需要按照以下步骤进行安装和配置： 1. **构建项目**：使用Maven或Gradle等构建工具编译源代码，生成可部署的JAR文件。 2. **配置JIRA**：将生成的JAR文件...
Grafana监控系统之Prometheus+Grafana监控系统搭建
03-09
搭建Prometheus+Grafana监控系统的基本步骤如下： 1. **安装Prometheus**： - 下载最新版本的Prometheus（例如，`prometheus-2.23.0-rc.0.windows-amd64`），解压后配置`prometheus.yml`文件，指定要监控的目标和...
kube-prometheus 系列1 项目介绍
云原生，DevOps，Kubernetes
08-16 4606
相比于手动安装并配置 Prometheus、Alertmanager、Grafana 等单个组件，使用 kube-prometheus 可以节省部署和管理Prometheus监控生态组件的时间和精力。kube-prometheus 是一个基于 Kubernetes 部署的 Prometheus 和 Grafana 监控系统的完整解决方案，是 Prometheus Operator 的实现之一。整个生态包含诸多组件，为了简化安装部署和配置高可用等，社区开发了kube-prometheus项目。
飞机大战系列 Space War1.0（免费，开源）
07-14
飞机大战系列 Space War1.0（免费，开源）
基于Hadoop的文件词频统计的实现（大数据技术课程设计）
07-14
使用Hadoop大数据架构体系中的HDFS、HBase以及Spark软件，完成大数据处理的典型案例：文件词频统计的实现。
湖科大计算机网络视频笔记，跟着视频系统学了一遍的记录
最新发布
07-14
视频链接：https://www.bilibili.com/video/BV1c4411d7jb/，适用于考研后期查缺补漏和前期确定复习方向、期末考和课前预习。做成PDF形式便于查阅和在iPad上查看。
matlab下载，表面张力，main.m
07-14
matlab下载，表面张力，main.m
2.4.27.2a.pdf
07-13
2.4.27.2a.pdf
大学生创业计划书(33)三套材料.doc
07-14
大学生创业计划书(33)三套材料.doc
搭建prometheus 监控
05-13
搭建 Prometheus 监控一般需要以下步骤： 1. 下载 Prometheus 首先需要去官网下载 Prometheus，下载地址为：https://prometheus.io/download/ 。 根据你的系统选择对应的版本，下载完成后解压即可。 2. 配置 Prometheus 在解压完成后，进入 Prometheus 的目录，找到 `prometheus.yml` 文件。这个文件是 Prometheus 的配置文件，我们需要根据实际情况进行修改。 在文件中添加以下内容： ```yaml global: scrape_interval: 15s # 指定采集数据的时间间隔，单位是秒 evaluation_interval: 15s # 指定评估规则的时间间隔，单位是秒 scrape_configs: - job_name: 'prometheus' static_configs: - targets: ['localhost:9090'] # 指定需要监控的目标，这里是监控 Prometheus 本身 - job_name: 'node-exporter' static_configs: - targets: ['localhost:9100'] # 指定需要监控的目标，这里是监控节点信息 ``` 上面的配置文件中，我们定义了两个 job，一个是监控 Prometheus 本身的，一个是监控节点信息的。 3. 启动 Prometheus 在配置文件修改完成后，我们可以启动 Prometheus 了。进入 Prometheus 目录，执行以下命令： ```bash ./prometheus --config.file=prometheus.yml ``` 此时，Prometheus 就会启动，并且开始采集数据。 4. 配置 Grafana 在 Prometheus 启动后，我们还需要配置 Grafana 来展示监控数据。 首先需要去官网下载 Grafana，下载地址为：https://grafana.com/grafana/download 。 下载完成后解压即可。 在解压完成后，进入 Grafana 的目录，找到 `grafana.ini` 文件。这个文件是 Grafana 的配置文件，我们需要根据实际情况进行修改。 在文件中添加以下内容： ```ini [server] http_port = 3000 [auth.anonymous] enabled = true ``` 上面的配置文件中，我们设置了 Grafana 的端口为 3000。 5. 启动 Grafana 在配置文件修改完成后，我们可以启动 Grafana 了。进入 Grafana 目录，执行以下命令： ```bash ./bin/grafana-server web ``` 此时，Grafana 就会启动，并且可以通过浏览器访问了。 6. 添加数据源 在访问 Grafana 后，我们需要添加 Prometheus 的数据源。在 Grafana 的界面中，点击左侧的“Configuration”按钮，然后选择“Data Sources”菜单。 在“Data Sources”页面中，点击“Add data source”按钮，然后选择“Prometheus”数据源。 在“Prometheus”数据源界面中，填写以下信息： - Name：数据源的名称，可以随意填写。 - HTTP URL：Prometheus 的地址，格式为 `http://<prometheus-address>:<prometheus-port>`。 - Access：选择“Server”。 然后点击“Save & Test”按钮，如果出现“Data source is working”提示，说明数据源添加成功。 7. 导入仪表盘 在数据源添加成功后，我们需要导入仪表盘来展示监控数据。 在 Grafana 的界面中，点击左侧的“+”按钮，然后选择“Import”菜单。 在“Import Dashboard”页面中，填写以下信息： - Grafana.com Dashboard：填写仪表盘的 ID，例如 1860。 - Prometheus：选择刚才添加的数据源。 然后点击“Load”按钮，就可以加载仪表盘了。 8. 查看监控数据 在导入仪表盘后，我们就可以在 Grafana 中查看监控数据了。通过 Grafana 的界面，我们可以看到各种监控指标的变化情况，以及各种告警信息。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值