prometheus exporter监控部署(一)

已于 2024-04-02 21:07:14 修改
阅读量940 收藏 23
点赞数 21
文章标签： prometheus grafana
于 2024-02-21 10:30:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38669676/article/details/136205197
版权

prometheus exporter监控部署(一)

github项目

https://github.com/prometheus/prometheus

https://github.com/grafana/grafana

prometheus原理

​image​

  1. Prometheus server Prometheus服务器，用于抓取和存储时间序列数据。Prometheus server 由三个部分组成：Retrival，Storage，PromQL

    Retrieval：负责在活跃的target 主机上抓取监控指标数据。
    Storage：存储，主要是把采集到的数据存储到磁盘中。默认为15天（可修改）。
    PromQL：是Prometheus提供的查询语言模块。

  2. client libraries 客户端库，用于检测应用程序代码的客户端库。Prometheus本身提供了支持多种语言的SDK，用于对接 Prometheus Server, 可以查询和上报数据。目的在于为那些期望原生提供Instrumentation功能的应用程序提供便捷的开发途径。

  3. push gateway 支持短期工作的推送网关。类似一个中转站，可以理解成目标主机可以上报短期任务的数据到Pushgateway，然后Prometheus server 统一从Pushgateway拉取数据。

  4. exporters 指标暴露器，负责收集不支持内建Instrumentation的应用程序或服务的性能指标数据，并通过HTTP接口供Prometheus Server获取。用于暴露已有的第三方服务的 metrics 给 Prometheus。

  5. alertmanager 是一个独立的告警模块，从Prometheus server端接收到“告警通知”后，会进行去重、分组，并路由到相应的接收方，发出报警。

  6. Service Discovery：服务发现，用于动态发现待监控的Target，Prometheus支持多种服务发现机制，例如文件、DNS、Consul、Kubernetes等等。

  7. Grafana：是一个跨平台的开源的度量分析和可视化工具，可以将采集的数据可视化的展示，并及时通知给告警接收方。其官方库中具有丰富的仪表盘插件。

prometheus配置

# my global config
global:
  scrape_interval:     15s # 采集被监控段指标的一个周期
  evaluation_interval: 15s # 告警评估的一个周期

# 告警的配置文件，目前未涉及
alerting:
  alertmanagers:
  - static_configs:
    - targets:
      # - alertmanager:9093

# 告警规则配置
rule_files:
  # - "first_rules.yml"
#被监控端的配置
scrape_configs:

  - job_name: 'prometheus'
    static_configs:
    - targets: ['localhost:9090']

  - job_name: "docker"
    static_configs:
    - targets: ['192.168.31.62:8080']

  - job_name: "Linux"
    static_configs:
    - targets: ['192.168.31.62:9100']

prometheus grafana 安装

#grafana docker部署
docker pull grafana/grafana
docker run -itd --name=grafana --restart=always -p 3000:3000 -v /home/grafana grafana/grafana

#prometheus docker部署
docker pull prom/prometheus
docker run -d --name=prometheus --restart=always -p 9090:9090 -v /root/tmp/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml prom/prometheus

#查看docker部署是否成功
docker ps

prometheus Exporter应用

  1. 下载exporter

    https://github.com/prometheus/node_exporter

    不同操作系统使用对应的暴露器,官方暴露器监控指标覆盖不全,自定义指标可使用自研采集器

  2. 运行exporter

    下载执行程序后解压运行，其中node exporter默认监听端口9100，因此在server端配置文件中设置端口时需要对应

    linux系统设置开机自启动配置

    #1.解压exporter工具
tar zxf node_exporter-0.17.0.linux-amd64.tar.gz
mv node_exporter-0.17.0.linux-amd64/* /usr/local/node_exporter

#2.linux系统设置开机自启动配置配置文件
#/usr/lib/systemd/system/node_exporter.service
[Unit]
Description=https://prometheus.io

[Service]
Restart=on-failure
ExecStart=/usr/local/node_exporter/node_exporter

[Install]
WantedBy=multi-user.target

#3.设置系统权限
systemctl enable node_exporter
systemctl restart node_exporter


#4.设备使用后台方式运行,AC使用arm版本
iptables -I INPUT_ZONE_WAN -i br-wan+ -p tcp -m tcp --dport 9100 -j ACCEPT #放开9100端口防火墙限制
nohup node_exporter-1.7.0.linux-arm64/node_exporter > /dev/null &

  3. 检查采集结果

    通过 http://[ip address]:9100/ 可查看exporter执行结果

    ​image​

    设备可能因为防火墙导致接口无法访问，实际使用时需要注意放开相关端口

  4. 检查prometheus采集结果

    在server端查看监控状态 state显示up即为监控成功

    ​image

  5. 查看监控数据图表

    通过Graph页面借助PromQL指令可以查询保存的数据，可查看数据结果，PromQL指令较为繁琐，此处可直接使用grafana导入数据使用其数据表盘直观查看

    ​image​

grafana数据展示

  1. 进入web页面添加数据源，通过http://[ip address]:3000/访问web页面并添加数据源

    ​​image​​

  2. 检查数据源是否正常，获取失败时检查prometheus server防火墙状态

     systemctl stop firewalld
 systemctl disable firewalld

    ​image​

  3. 设置数据面板表盘模板格式 更多格式访问https://grafana.com/grafana/dashboards/

    ​image​

  4. 设置完成后导入数据，查看面板展示结果如下

    以ID1860 Node Exporter Full为例

    ​​image​​

‍

lifeprofessor
关注
prometheus-nginxlog-exporter:将指标从Nginx访问日志文件导出到Prometheus
05-01
NGINX到Prometheus日志文件导出器 不断读取NGINX日志文件（或任何类似日志文件）并将度量导出到帮助程序工具。 内容 配置文件 高级功能 命名空间作为标签 自定义标签直通 日志来源 动态重新贴标签 文件球 JSON log_format 经常问的问题 学分 用法 您可以使用简单的配置（使用命令行标志），也可以使用更高级的配置创建配置文件。 使用命令行： $ ./prometheus-nginxlog-exporter \ -format="<FORMAT>" \ -listen-port=4040 \ -namespace=nginx \ [PATHS-TO-LOGFILES...] 使用配置文件： $ ./prometheus-nginxlog-exporter -config-file /path/to/config.hcl 您可
Prometheus Flask exporter使用示例
rs勿忘初心的博客
06-19 1451
prometheus-flask-exporter该库提供flask应用的http请求度量，可以导出数据到Prometheus，它还可以使用方便的函数跟踪方法调用。参考官网说明：prometheus-flask-exporter · PyPI 3、完整的示例 如果直接看官网说明，你可能会觉得一下子不太好理解，下面我们基于一个完整的示例来看下，效果图：代码完整示例参考：（prometheus_flask_exporter/examples/sample-signals/）prometheus_flask
Prometheus Exporter监控篇 - 服务器资源监控
GneMoaH.的博客
08-12 614
本章针对服务器资源展开两部分的监控方向，以Kubernetes方式部署；
prometheus-nginxlog-exporter构建Nginx日志监控
runzhliu大数据/容器日记
06-27 4487
lunimous 可以开启 dashborad rgw 通过 prometheus-nginxlog-exporter 可以解析 Nginx 日志，还有一些正则可以去处理，然后通过 relabel 的配置，让其在指标数据上打上标签。 civetweb 没有在日志记录请求返回的时间，所以考虑用 Nginx 来替换，为了能给 Ceph RGW 加一个请求相关的监控，所以需要去解析日志，在 prometheus-nginxlog-exporter 中，通过配置文件，可以把标签和端口等设置好，然后让 prometh
【Prometheus】Python Exporter接入Prometheus实战
qq_20623849的博客
02-08 3368
Prometheus是一个监控告警工具。监控可以简单理解为一个指标数据收集器，在运维体系中，常用来收集服务器节点状态，容器状态，服务指标等多种类型数据。告警可以简单理解为，Prometheus根据监控的一些数据指标，当达到某个条件的时候，生成告警信息。与 Histogram 类型类似，用于表示一段时间内的数据采样结果（通常是请求持续时间或响应大小等），但它直接存储了分位数（通过客户端计算，然后展示出来），而不是通过区间来计算。
Prometheus Flask Exporter: 监控Web应用的新利器
gitblog_00042的博客
04-15 487
Prometheus Flask Exporter: 监控Web应用的新利器 prometheus_flask_exporterPrometheus exporter for Flask applications项目地址:https://gitcode.com/gh_mirrors/pr/prometheus_flask_exporter 是一个开源工具，专为Python Flask应用程序设计...
Prometheus&Grafana&windows_exporter服务器&资源监控
09-16
5. 在Grafana中添加Prometheus作为数据源，然后创建新的仪表板，导入Prometheus+Grafana监控部署.docx文档中的配置或自行设计。 6. 可选：对于SQL Server监控，参考15024_MSSQL windows_exporter.txt，配置windows_...
Prometheus 监控snmp + 飞塔防火墙（Fortinet）
07-19
Prometheus 使用snmp_exporter根据snmp监控网络设备,包含常用的网络设备，Fortinet 100D、Fortinet300D、Fortinet10D，snmp_exporter启动配置文件snmp.yml。 下载后需要修改配置文件的团体号，拉到文件最下面...
基于prometheus的k8s监控部署
02-27
综上所述，基于Prometheus的K8s监控部署涉及到多个组件的配置和集成，包括Prometheus自身、Alertmanager和Node-Exporter。理解这些组件的工作原理，以及如何在K8s环境中有效地部署和管理它们，是实现高效监控的关键...
K8S主机Prometheus监控node-exporter资源清单及镜像文件
12-29
原文链接：https://blog.csdn.net/m0_37814112/article/details/122170537 说明：上述资源包括部署清单文件、镜像文件、告警规则文件
prometheus_flask_exporter：Flask应用程序的Prometheus导出器
02-05
普罗米修斯烧瓶出口商 该库提供HTTP请求指标以导出到。 它还可以使用方便的功能来跟踪方法调用。 正在安装 使用安装： pip install prometheus-flask-exporter 或将其粘贴到requirements.txt中： # newest version prometheus-flask-exporter # or with specific version number prometheus-flask-exporter==0.18.1 然后像往常一样从requirements.txt文件安装依赖项： pip install -r requirements.
Jenkins没有网络，实例离线
m0_50179122的博客
11-08 957
jenkins实例似乎离线 jenkins没有网络，报错 UnknownHostException，如果你尝试了很多文章都提到的替换url地址，但是没什么用，说明你的jenkins可能并没有网络。 如果是用docker启动的jenkins，需要添加参数docker run -it --rm --network=host jenkins /bin/bash，这样容器才能使用到物理机的网络。 如果是k8s部署的jenkins，则需要添加hostNetwork: true字段，加在跟container字段同级
Prometheus运维九 监控nginx服务
ZhanBiaoChina的博客
01-02 596
如鲸向海，似鸟投林
prometheus nginx log exporter
12-15 1013
prometheus nginx log exporter. 详见：https://github.com/11061055/nginx-log-exporter 可以简单修改实现除nginx以外的日志导出。
nginx接入prometheus
qq876868629的博客
11-02 1714
一、安装nginx插件:nginx-module-vts 1.下载nginx源码,这里使用nginx/1.20.1,并上传至服务器 2.下载nginx-module-vts源码,上传至服务器, 解压到/home/op/backup/nginx-module-vts目录 3.查看当前服务器运行的nginx配置 nginx -V 命令执行后打印出信息: nginx version: nginx/1.20.1 built by gcc 4.8.5 20150623 (Red Hat 4.8.5-39) (GCC)
prometheus|云原生|prometheus项目安装postgres-exporter监视组件的部署简介
zsk_john的技术分享专用博客
11-27 2150
最近刚好得空再琢磨prometheus，那肯定要玩玩postgrs-expoter这个数据库监控了，要不没办法体现prometheus的强大。 OK，postgres-exporter和其它的监视组件例如node-exporter基本是一样的，都是由go语言编写的，但是有一点雪微不同，它是监控数据库的，因此要和数据库打一点交道。所以呢，数据库需要有安装pg_stat插件，否则postgres-exporter可能会工作的不太好，很多数据收集不到吧。 其次呢，现在的网络文化就是一大抄，这个抄一下，那个抄一
Prometheus-Exporter详解
cristianoxm的博客
01-18 6403
因此，用户只能通过独立运行一个程序的方式，通过操作系统提供的相关接口，将系统的运行状态数据转换为可供Prometheus读取的监控数据。除了直接使用社区提供的Exporter程序以外，用户还可以基于Prometheus提供的Client Library创建自己的Exporter程序，目前Promthues社区官方提供了对以下编程语言的支持：Go、Java/Scala、Python、Ruby。所有的Exporter程序都需要按照Prometheus的规范，返回监控的样本数据。
自定义prometheus exporter实现监控阿里云RDS
Colinspace
09-21 2752
Prometheus官网提供的mysql exporter 对于mysql实例只能一个进程监控一个实例，在数据库实例很多的情况，不方便管理，另外内部也有诉求对数据库和表的增长需要进行监控。RDS默认不提供。故尝试自定义 Prometheus exporter ... ...
prometheus监控部署
最新发布
09-21
Prometheus是一个开源的分布式系统监控工具，由SoundCloud公司在2012年开发并维护。它的核心功能是实时收集、存储和查询服务的度量数据，例如CPU使用率、内存占用、网络请求等，并通过自定义的查询语言提供可视化和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值