timescaledb 自己使用中的备份恢复经验

最新推荐文章于 2024-02-22 21:07:54 发布
最新推荐文章于 2024-02-22 21:07:54 发布
阅读量985 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kangseung/article/details/106431489
版权

平时存储一些期货数据使用了postgresql,由于tick数据量太大导致postgresql性能不足,尝试使用timescaledb。

timescaledb有一些用起来不太方便的地方，比如恢复数据要先执行一条命令 恢复完再执行一条命令，如果忘记了基本就白弄了。。

还有新建表要先创建hypertable，忘记了又不好合并，反正就是最好在插数据以前把timescaledb的设置都处理好再插数据，我近期使用的经验上，备份我以psycopg2的库自带的copy_from 与 copy_to功能进行备份CSV或者TXT，性能比较快也比较方便。

 

创建表和hypertable语句都提前用python写好，需要导数据什么的直接重新运行一下即可。另外pgtune也可以对pgsql进行调优，调优后在使用性能更佳,个人经验上感觉比pg_dump pg_restore什么的方便一些，迁移也容易一点 毕竟都是csv

kangseung
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
postgresql数据库 timescaledb数据库 还原数据库
yang_z_1的博客
12-17 2343
postgrs timescaledb数据库 还原数据库 最近碰到一个问题 timescaledb数据库 所在的服务器内存满了 新加一个盘 考虑如何迁移过去 因为 timescaledb数据库 是不断上传数据的 考虑到尽可能的减少数据丢失 考虑用新建表空间的方式来迁移数据，方法如下 一 .建立表空间 首先建立表空间 tbs_cs1 指定路径在新盘上 1. 创建目录 mkdir -p /u01/cs/pgdata 2.分配权限 [root@localhost ~]# chown postgres:pos
timescaledb 时序库备份还原 遇到的问题与解决
yang_z_1的博客
07-20 2327
timescaledb 时序库备份还原时 ， 我对时序库采用以下命令进行全库备份 /usr/pgsql-11/bin/pg_dump --file "/u01/pgsql.backup" --host "10.10.2.116" --port "5432" --username "postgres" --dbname "hrmwv2-yjb" --verbose --role "postgres" --format=c --blobs --encoding "UTF8" 还原命令如下 cs=# SEL
TimescaleDB配置
傲骨雄风的博客
03-27 1799
一、timescaledb软件安装 1.安装pg14 pg14数据库下载地址 链接：https://pan.baidu.com/s/1PI2IfhNLUezfuDn1dzI_vw 提取码：c110 timescaledb数据库下载地址 链接：https://pan.baidu.com/s/1MSprxKguT2x3Y6l-vrOLhQ 提取码：xdoe 2.安装完pg配置环境变量 pg_config F:\Program Files\PostgreSQL\14\bin path:F:\P..
PG：数据库的备份与恢复
不加糖Zzz的博客
01-10 5599
一、传统操作 创建数据库 并允许备份 该命令为数据库命令 CREATE DATABASE tutorial; ALTER DATABASE tutorial SET timescaledb.restoring='on'; ALTER DATABASE tutorial SET timescaledb.restoring='off'; 备份数据库 该命令为终端命令 数据库外使用 pg_dump...
【基础】TimescaleDB 简单使用
情绪瓜皮皮丶的学习之路
10-24 5103
基于 PostgreSQL 数据库的 TimescaleDB 时序库的基本使用整理
pg12主从高可用+timescaledb分布式节点
04-01
在主从高可用环境中使用TimescaleDB，需要注意的是，主节点上的TimescaleDB hypertable和分布式的分片状态必须能够在故障切换后由新的主节点接管。Patroni应配置为在故障切换后自动同步这些状态信息，确保一致性。 ...
Postgresql及timescaledb
01-26
9. **备份与恢复**：了解如何进行PostgreSQL和TimescaleDB的备份，以及在发生故障时如何恢复数据。 10. **监控与调优**：掌握监控数据库性能的方法，以及根据监控结果进行性能调优的技巧。 通过深入学习这些知识点...
实时数据库在变电站智能热点监测系统中的应用.rar
09-20
常见的实时数据库产品有Kafka、InfluxDB、TimescaleDB等，它们各有特点，可以根据实际需求进行选择。 总的来说，实时数据库在变电站智能热点监测系统中的应用是电力系统现代化和智能化的重要组成部分。它通过高效的...
大数据存储及分层实践-6-1 工业设备预测性维护及时序数据库选型.zip
05-30
5. **稳定性与可靠性**：在工业环境中，数据的完整性和一致性至关重要，因此数据库需要具备高可用性和数据备份恢复能力。 6. **集成性**：易于与其他系统（如流处理平台、数据分析工具）集成，形成完整的数据处理...
postgres-practice
03-31
6. **扩展性**：PostgreSQL有丰富的社区开发的扩展，如PostGIS（地理空间数据处理）、PL/pgSQL（内建过程语言）和 TimescaleDB（时间序列数据扩展）等。 7. **复制与高可用**：PostgreSQL支持多种复制模式，如异步...
TimescaleDB时序数据库初识
数据源的港湾
07-26 643
时间序列数据是总体上表示系统、流程或行为如何随时间变化的数据。以时间为中心:数据记录总是有一个时间戳。仅追加:数据几乎完全是仅追加的(insert)。最近的:新数据通常是关于最近的时间间隔，我们很少更新或回填关于旧时间间隔的缺失数据。然而，数据的频率或规律性并不那么重要;它可以每毫秒或每小时收集一次。它也可以定期或不定期收集(例如，当某些事件发生时，而不是在预定义的时间)。与其他数据(如标准关系“业务”数据)相比，时间序列数据(以及支持它们的数据库)之间的一个关键区别是，
TimescaleDB 与PostgreSQL 数据库的比较（未完待续······）
殇莫忆的博客
07-25 9241
文档：https://docs.timescale.com/v0.9/introduction/timescaledb-vs-postgres 为什么在关系数据库上使用TimescaleDB? TimescaleDB相对于存储时间序列数据的vanilla PostgreSQL或其他传统RDBMS提供了三大优势：· 数据采集率要高得多，尤其是在数据库规模较大的情况下。 · 查询性能从相当于数量级...
PGSQL插件TimescaleDB的用法
不想混日子的程序员的博客
03-31 1667
Timescale插件的数据保留策略，（过期数据处理） https://docs.timescale.com/api/latest/hypertable/create_hypertable/#create-hypertable，官方文档
postgresql 数据库 timescaledb 函数time_bucket_gapfill（）报错解决及更换 license
yang_z_1的博客
07-06 2524
最近在工作中使用postgresql 和 timescaledb 的time_bucket_gapfill（）函数 报错，让更换license，在网上找了一大圈，没有找到，最后解决了这个问题，这篇文章记录我的解决办法查看timescaledb.license参数命令：show timescaledb.license；修改命令： 结果不行，报错如下：lter system set timescaledb.license=‘timescale’；那只能换包了如果出现上面那种情况，那我们只能先从官网上下载带 '
TimescaleDB简介及基本操作
YesPlease的博客
10-13 4022
Postgresql的扩展TimescaleDB简介及基本操作
时序数据库TimescaleDB,实战部署全攻略
最新发布
IT邦德
02-22 2753
运用时间模型来构造的应用非常需要时序数据库的加持，包括未来大数据的趋势，时序数据库必然会成为一个新潮流。
记一次 Centos7 Postgresql v11 数据库备份、还原
一花一世界
06-04 1665
一、数据库安装 根据自身环境需要选择安装 1、yum 指定目录安装 https://blog.csdn.net/llwy1428/article/details/105143053 2、yum 直接安装 https://blog.csdn.net/llwy1428/article/details/102486414 3、编译安装 https://blog.csdn.net/llwy1428/article/details/95444151 4、PostgreSql 基本操作 https:/
基于PostgreSQL的时序数据库TimescaleDB
PostgreSQL China
10-19 3044
作者：杭州美创科技有限公司 什么是时序数据库？顾名思义，用于处理按照时间变化顺序的数据的数据库即为时序数据库（time-series database），时序数据库专门优化处理带时间标签的数据，为什么会衍生时序数据库这一种新趋势呢？我们知道像PostgreSQL和MySQL这种关系型数据库对于短期需求不大的情况下下还是可以满足的，但是一旦数据量增长，其性能不足以支持频繁的添加和读取需求。运用时间模型来构造的应用非常需要时序数据库的加持，包括未来大数据的趋势，时序数据库必然会成为一个新潮流。 今天的主角T
TimescaleDB数据库
热门推荐
殇莫忆的博客
06-04 1万+
2018年6月4日星期一随笔 笔记 TimescaleDBl 什么是TimescaleDB？TimeSeldB是唯一支持完整SQL的开放源代码时间序列数据库。为快速摄取和复杂查询优化，TimeSeleDB易于使用，如传统的关系数据库，但按以前为NoSQL数据库保留的方式进行缩放。特别是，这使得TimeSeldB是操作分析的理想候选者。TimeSeldB是在Apache 2许可证下分发的。l 为什么...
timescaledb使用
05-21
TimescaleDB是一款专门针对时间序列数据的开源关系型数据库，它是PostgreSQL的扩展。使用TimescaleDB可以轻松地管理和分析大量的时间序列数据。下面是使用TimescaleDB的一些常见步骤： 1. 安装TimescaleDB扩展：在PostgreSQL数据库中安装TimescaleDB扩展，可以使用以下命令： ``` CREATE EXTENSION IF NOT EXISTS timescaledb CASCADE; ``` 2. 创建超级用户：创建一个超级用户，可以使用以下命令： ``` CREATE USER tsdb_admin WITH PASSWORD 'password'; ALTER USER tsdb_admin WITH SUPERUSER; ``` 3. 创建时间序列表：使用CREATE TABLE语句创建时间序列表，可以使用以下命令： ``` CREATE TABLE sensor_data ( time TIMESTAMPTZ NOT NULL, sensor_id INTEGER NOT NULL, value DOUBLE PRECISION NOT NULL, PRIMARY KEY (time, sensor_id) ); SELECT create_hypertable('sensor_data', 'time'); ``` 4. 插入数据：使用INSERT语句将数据插入时间序列表中，可以使用以下命令： ``` INSERT INTO sensor_data (time, sensor_id, value) VALUES (NOW(), 1, 25.5), (NOW(), 2, 36.2); ``` 5. 查询数据：使用SELECT语句查询时间序列数据，可以使用以下命令： ``` SELECT time_bucket('1 hour', time) AS hour, sensor_id, AVG(value) FROM sensor_data WHERE time > NOW() - INTERVAL '1 day' GROUP BY hour, sensor_id; ``` 以上是使用TimescaleDB的一些常见步骤，更多详细信息可以参考官方文档。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值