pushgateway

Pushgateway 简介

Pushgateway 是 Prometheus 生态中一个重要工具,使用它的原因主要是:

  • Prometheus 采用 pull 模式,可能由于不在一个子网或者防火墙原因,导致 Prometheus 无法直接拉取各个 target 数据。
  • 在监控业务数据的时候,需要将不同数据汇总, 由 Prometheus 统一收集。

由于以上原因,不得不使用 pushgateway,但在使用之前,有必要了解一下它的一些弊端:

  • 将多个节点数据汇总到 pushgateway, 如果 pushgateway 挂了,受影响比多个 target 大。
  • Prometheus 拉取状态 up 只针对 pushgateway, 无法做到对每个节点有效。
  • Pushgateway 可以持久化推送给它的所有监控数据。
    因此,即使你的监控已经下线,prometheus 还会拉取到旧的监控数据,需要手动清理 pushgateway 不要的数据。

Pushgateway使用方法

usage: pushgateway [<flags>]
Flags:
      --web.listen-address=":9091"  		监听Web界面,API和遥测的地址。
      --web.telemetry-path="/metrics"  		公开metrics的路径。
      --web.external-url=        			可从外部访问Pushgateway的URL.
      --web.route-prefix=""      			Web端点内部路由的前缀。 默认为--web.external-url的路径.
      --persistence.file=""      			归档以保留metrics。 如果为空,则metrics仅保留在内存中.
      --persistence.interval=5m  			写入持久性文件的最小间隔。
      --log.level="info"         			仅记录具有给定严重性或更高严重性的消息。 有效级别:[debug, info, warn, error, fatal]
      --log.format="logger:stderr"  		设置日志目标和格式。 示例:“ logger:syslog?appname = bob&local = 7”或“ logger:stdout?json = true”
      --version                  			显示应用程序版本。

pushgateway每次只向Prometheus返回最后一次推送的数据

  • pushgateway并不是将Prometheus的pull改成了push,它只是允许用户向他推送指标信息,并记录。而Prometheus每次从 - pushgateway拉取的数据并不是期间用户推送上来的所有数据,而是最后一次push上来的数据。所以设置推送时间与Prometheus拉取的时间相同(<=)一般是较好的方案。

注意:如果客户端一直没有推送新的指标到pushgateway,那么Prometheus将始终拉取最后push上来的数据。
可以通过命令删除指标:
Delete all metrics in the group identified by {job=“some_job”,instance=“some_instance”}:
curl -X DELETE http://pushgateway.example.org:9091/metrics/job/some_job/instance/some_instance

Delete all metrics in the group identified by {job=“some_job”} (note that this does not include metrics in the {job=“some_job”,instance=“some_instance”} group from the previous example, even if those metrics have the same job label):
curl -X DELETE http://pushgateway.example.org:9091/metrics/job/some_job

Delete all metrics in all groups (requires to enable the admin API via the command line flag --web.enable-admin-api):
curl -X PUT http://pushgateway.example.org:9091/api/v1/admin/wipe

推送到pushgateway的方法

  • push:删除原有的所有指标并推送新的指标,对应put方法
  • pushadd:更新已有的所有指标,对应post方法
  • delete:删除指标,对应delete方法
  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
一、prometheus简介 Prometheus是一个开源的系统监控和告警系统,现在已经加入到CNCF基金会,成为继k8s之后第二个在CNCF维护管理的项目,在kubernetes容器管理系统中,通常会搭配prometheus进行监控,prometheus支持多种exporter采集数据,还支持通过pushgateway进行数据上报,Prometheus再性能上可支撑上万台规模的集群。 二、prometheus架构图 三、prometheus组件介绍 1.Prometheus Server: 用于收集和存储时间序列数据。 2.Client Library: 客户端库,检测应用程序代码,当Prometheus抓取实例的HTTP端点时,客户端库会将所有跟踪的metrics指标的当前状态发送到prometheus server端。 3.Exporters: prometheus支持多种exporter,通过exporter可以采集metrics数据,然后发送到prometheus server端 4.Alertmanager: 从 Prometheus server 端接收到 alerts 后,会进行去重,分组,并路由到相应的接收方,发出报警,常见的接收方式有:电子邮件,微信,钉钉, slack等。 5.Grafana:监控仪表盘 6.pushgateway: 各个目标主机可上报数据到pushgatewy,然后prometheus server统一从pushgateway拉取数据。 四、课程亮点 五、效果图展示 六、讲师简介 先超(lucky):高级运维工程师、资深DevOps工程师,在互联网上市公司拥有多年一线运维经验,主导过亿级pv项目的架构设计和运维工作 主要研究方向: 1.云计算方向:容器 (kubernetes、docker),虚拟化(kvm、Vmware vSphere),微服务(istio),PaaS(openshift),IaaS(openstack)等2.系统/运维方向:linux系统下的常用组件(nginx,tomcat,elasticsearch,zookeeper,kafka等),DevOps(Jenkins+gitlab+sonarqube+nexus+k8s),CI/CD,监控(zabbix、prometheus、falcon)等 七、课程大纲
Pushgateway 是 Prometheus 生态系统中的一个组件,用于临时存储和持久化短期任务的指标数据。它允许应用程序将指标数据推送到 Pushgateway,并由 Prometheus 从 Pushgateway 获取数据进行抓取和持久化。 要实现 Pushgateway 数据的持久化,你可以考虑以下几个方法: 1. 使用持久化存储:Pushgateway 默认将数据存储在内存中,但你可以通过配置将其存储到持久化存储介质,如磁盘。这样可以确保即使重启 Pushgateway,也能保留之前推送的指标数据。 2. 定期备份:你可以设置定期备份 Pushgateway 的数据。定期备份可以通过将数据导出到文件,或者将其推送到其他远程存储(如对象存储服务)来实现。这样即使出现故障,也能恢复历史数据。 3. 数据复制:如果你有多个 Pushgateway 实例,你可以考虑使用数据复制来实现数据的冗余和容错。这可以通过设置多个 Pushgateway 实例,并使用适当的同步机制来实现数据的复制。 4. 故障恢复策略:在出现故障或不可用情况时,需要定义合适的故障恢复策略。例如,当 Pushgateway 不可用时,应用程序可以缓存指标数据,并在 Pushgateway 可用时重新推送。 需要注意的是,Pushgateway 适用于短期任务和临时指标数据的存储,并不适合长期存储大量数据。对于长期存储和分析,你可以考虑将指标数据导入到其他系统(如 Prometheus 或时间序列数据库)中。 希望以上信息能帮助到你!如果你还有其他问题,请继续提问。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值