prometheus连接influxdb时序数据库实现数据持久化

最新推荐文章于 2024-10-12 20:38:50 发布
最新推荐文章于 2024-10-12 20:38:50 发布
阅读量1.6k 收藏 5
点赞数 5
分类专栏： 《Prometheus监控系统实战》
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44953658/article/details/118483297
版权
本文详细介绍了如何配置Go环境，部署InfluxDB，修改数据存放路径，创建Prometheus数据库，配置remote_storage_adapter，并将其作为系统服务，最后通过配置使Prometheus连接InfluxDB进行数据持久化，确保数据在Grafana上正常展示，并讨论了InfluxDB的备份方法。
摘要由CSDN通过智能技术生成

prometheus连接influxdb

官方文档

influxdb简介

InfluxDB是一个时间序列数据库，旨在处理高写入和查询负载。 它是TICK堆栈的组成部分。 InfluxDB旨在用作涉及大量带时间戳数据的任何用例的后备存储，包括DevOps监控，应用程序指标，物联网传感器数据和实时分析。

以下是InfluxDB目前支持的一些功能，使其成为处理时间序列数据的绝佳选择:

专为时间序列数据编写的自定义高性能数据存储。 TSM引擎允许高摄取速度和数据压缩

完全使用go语言编写,并编译为一个单独的二进制文件.没有额外的依赖

简单,高性能的读写HTTP APIS

通过插件支持其他数据提取协议.比如:Graphite,collectd,和OpenTSDB

类SQL查询语言,方便数据的查询聚合

将tag索引,以便更快的查询速度

数据维护策略有效的移除过期数据

连续查询自动计算聚合数据,使定期查询更高效

可能由于自己的yum源不够全，通过yum install的方式无法安装influxdb，后采用下载influxdb的rpm包的方式安装部署

了解本专栏 订阅专栏 解锁全文 超级会员免费看
Jiangxl~
关注
专栏目录
订阅专栏
时序数据库
JustinMars的博客
09-08 894
时序数据库（Time Series Database，TSDB）是一种专门用于存储、检索和处理时间序列数据的数据库系统。时间序列数据是按照时间顺序记录的数据点集合，通常用于跟踪和分析随时间变化的数据，例如传感器数据、监控数据、日志数据、金融数据等。
(4)EII时序栈InfluxDB和Grafana模块数据持久化
weixin_39816256的博客
09-18 557
本文提供了一种实现EII InfluxDB和Grafana模块数据持久化的方法。
Prometheus数据持久化Influxdb
TT-Learning
08-05 4013
文章目录1.安装 Influxdb1.1 下载并安装1.2 启动1.3 配置文件1.4 创建http接口用于prometheus2.修改prometheus配置3.查看Influxdb数据库 1.安装 Influxdb 1.1 下载并安装 下载：https://dl.influxdata.com/influxdb/releases/influxdb-1.5.2.x86_64.rpm 安装：yum install -y influxdb-1.8.1.x86_64.rpm 1.2 启动 systemctl s
性能监控平台：基于 Prometheus+InfluxDB + Grafana|果断收藏
最新发布
2301_79535618的博客
10-12 871
为什么要解释数据的逻辑呢？因为最近在工作中遇到一些情况，有人觉得有了 Prometheus + Grafana + Exportor 这样的组合工具之后，基本上都不再用手工执行什么命令了。但我们要了解的是，对于监控平台来说，它取的所有的数据必然是被监控者可以提供的数据，像 node_exporter 这样小巧的监控收集器，它可以获取的监控数据，并不是整个系统全部的性能数据，只是取到了常见的计数器而已。这些计数器不管是用命令查看，还是用这样炫酷的工具查看，它的值本身都不会变。
influxdb持久化master-prometheus数据
weixin_41020960的博客
02-24 598
influxdb持久化master-prometheus数据 1. 部署influxdb docker run -d \ -p 8053:8086 \ -e INFLUXDB_DB=prometheus \ -e INFLUXDB_ADMIN_USER=admin -e INFLUXDB_ADMIN_PASSWORD=sa_123 \ -v $PWD:/var/lib/influxdb \ --restart=always \ -...
【Python】Locust持续优化：InfluxDB与Grafana实现数据持久化与可视化分析
GDYY3721的博客
08-06 1931
在进行性能测试时，我们需要对测试结果进行监控和分析，以便于及时发现问题并进行优化。Locust在内存中维护了一个时间序列数据结构，用于存储每个事件的统计信息。这个数据结构允许我们在Charts标签页中查看不同时间点的性能指标，但是正因为Locust WebUI上展示的数据实际上是存储在内存中的。所以在Locust测试结束后，这些数据将不再可用。
prometheus持久化到mysql_Prometheus数据持久化存储（二）
weixin_39552037的博客
01-28 757
Prometheus(普罗米修斯)Prometheus数据持久化存储(二)Prometheus+Influx+Grafana+Mysql数据持久化存储Prometheus的存储数据库默认只保留15天的数据，Grafana存储的配置以及图表都还在容器之中它自己生成的sqlit数据库中长期存储并不友好。为了更适应老板的需求，长期存储数据，我们可以添加时序数据库InfluxDB作为prometheus后...
prometheus使用InfluxDB
06-28
当 Prometheus 需要持久化存储其收集到的数据时，它可以配置为将数据发送到 InfluxDB。这通常发生在以下场景： 1. **数据存储**：Prometheus 使用 `remote_write` 或 `remote_read` 配置项，将收集到的数据推送到 ...
时序数据库与传统数据库的优势
wj1298250240的博客
05-14 5466
传统关系型数据库存储时序数据的问题 有了时序数据后，该存储在哪里呢？首先我们看下传统的关系型数据库解决方案在存储时序数据时会遇到什么问题。 很多人可能认为在传统关系型数据库上加上时间戳一列就能作为时序数据库。数据量少的时候确实也没问题。但时序数据往往是由百万级甚至千万级终端设备产生的，写入并发量比较高，属于海量数据场景。 MySQL在海量的时序数据场景下存在如下问题： 存储成本大：对于时序数据压缩不佳，需占用大量机器资源； 维护成本高：单机系统，需要在上层人工的分库分表，维护成本高； 写入吞吐低：单机写入吞
达梦数据库-prometheus连接dem
qq_33965675的博客
02-04 1148
prmetheus连接达梦
容器方式启动Influxdb并持久化数据的目录
xqx_Zi_yu
03-15 892
持久化应挂载的目录： “/var/lib/influxdb2” “/etc/influxdb2/config.yml”
prometheus基于influxdb的监控数据持久化存储方案
chubi7812的博客
07-26 4232
用prometheus在线上跑了两年了，都是用的本地磁盘做数据存储，磁盘空间有限，当空间不足时直接删除数据文件。近期监控系统正式上线了，运营提出了持久化存储监控数据的方案，前段做了选型最终确认使用influxdb，参考：prometheus远程存储之influxdb和timescaledb对比...
prometheus 监控MySQL数据库
xiaoenxiaoen的专栏
01-29 338
1、MySQL数据库安装exporter 安装mysqld_exporter 由于mysqld_exporter需要连接到MySQL，创建用户并赋予所需的权限 GRANT REPLICATION CLIENT,PROCESS ON *.* TO 'mysql_monitor'@'localhost' identified by 'mysql_monitor'; GRANT SELECT ON *.* TO 'mysql_monitor'@'localhost'; 修改配置文件 [client]
数据存储全方案----详解持久化技术
qq_48019875的博客
08-07 1173
Android系统中主要提供了3种方式用于简单地实现数据持久化功能：文件存储、SharedPreference存储、数据库存储。除了这3种方式之外，还可以将数据保存在手机的SD卡中。
如何从Prometheus单独提取个别数据持久化到InfluxDB
Fishermen_sail的博客
06-13 2203
Telegraf与Prometheus功能类似，也是采集指标的，一些不同之处在于Prometheus只能采集指标，而Telegraf什么也能采集，比如你想采集日志，就安装上对应插件，就可以采集日志了；InfluxDB是没有表的，它有一个叫bucket，这就相当于数据库，数据库里存放这些数据，第一个measurement其实就是代表了表；但是，从我们的使用场景出发，需要注意数据库的写入性能，通常，关系型数据库会采用B+数据结构，在数据写入时，有可能会触发叶裂变，从而产生了对磁盘的随机独写，降低写入速度。
Helm 部署 Prometheus 集群以 Influxdb 1.8.0 作为远程持久存储【1】
爱死亡机器人
04-03 2301
InfluxDB 是用Go语言编写的一个用于存储和分析时间序列数据的开源数据库，无需外部依赖。专为时间序列数据编写的自定义高性能数据存储。TSM引擎允许高摄取速度和数据压缩完全用 Go 语言编写。它编译成单个二进制文件，没有外部依赖项简单，高性能的写入和查询HTTP API专为类似SQL的查询语言量身定制，可轻松查询聚合数据标签允许对系列进行索引以实现快速有效的查询保留策略有效地自动使过时数据过期连续查询自动计算聚合数据，以提高频繁查询的效率。
使用influxdb支持的稳定协议连接prometheus弃用remote_storage协议
11
04-04 529
使用remote_storage协议去让prometheus连接influxdb数据库很不稳定，经常出现504数据无法写入influxdb的问题，并且经常无法读取到influxdb数据库的数据，因此我们弃用remote_storage协议，而采用influxdb特定的协议去让prometheus去连接。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Jiangxl~

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值