pg9.6单纯写性能探索

最新推荐文章于 2023-04-27 10:45:04 发布
最新推荐文章于 2023-04-27 10:45:04 发布
阅读量1k 收藏
点赞数 1
分类专栏： AntDB 文章标签： postgresql antdb pgbench adb 性能测试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011098015/article/details/79761111
版权
本文探讨了PostgreSQL 9.6在OLTP高写操作场景下的性能，选择了pg_9.6版本进行测试。通过在x86环境下使用pgbench工具，测试了不同并发下的数据写入能力。测试结果显示，性能瓶颈在于磁盘IO，CPU利用率最高达到20%，并发128时写入TPS达到峰值，随着并发增加TPS下降。硬件的IOPS测试显示为1207，表明硬件限制了进一步提升性能。
摘要由CSDN通过智能技术生成

背景介绍

PostgreSQL 在横向和纵向的扩展能力在开源数据库中一直处于非常领先的地位。针对OLTP类写操作占比很高的场景，想要探究下单pg在普通x86机器下对单个表的插入性能。

环境介绍

由于antdb v3.1版本用的pg内核版本为9.6，本次同样选取pg_9.6版本。

下载链接：https://github.com/postgres/postgres.git

x86配置:

CPU Intel(R) Xeon(R) CPU E5-2699 v4 @ 2.20GHz  (22core)
mem 64GB
磁盘 STAT 4TB




最低0.47元/天 解锁文章
AntDB-billyzhu
关注
专栏目录
PostgreSQL 9.6 中文手册 带书签 高清
02-03
PostgreSQL 9.6 中文手册 带书签 高清 PostgreSQL 9.6 中文手册 带书签 高清
timescaledb和PG写入性能测试
jacicson1987的专栏
10-15 5284
目录   结论摘要 测试环境 数据构造 CASE 1 单TIME索引 单行写入 WAL文件增加 BATCH写入 资源占用 CASE 2 增加一个索引 单行写入 BATCH写入 资源占用 CASE 3 大量数据 结论摘要 小数据量（线程10万行），无论单多线程，有无batch，PG和TSDB性能相仿，PG略强。 增加一条索引，两者插入性能都有所下降 WAL增长约为...
PostgreSQL 数据写入性能测试
热门推荐
将臣三代的博客
05-19 1万+
1主2从SR同步流复制测 搭建环境略，可参考之前文章 Server | Role 10.10.56.16 | master 10.10.56.17 | slave1 10.10.56.19 | slave2 16查询状态 pocdb=# SELECT client_addr,application_name,sync_state FROM pg_stat_replicat...
HybridDB for PostgreSQL , Greenplum 写入性能优化实践
weixin_34391854的博客
10-05 733
标签 PostgreSQL , Greenplum , HybridDB for PostgreSQL , insert , 性能 背景 Greenplum写入数据的性能优化实践。 1 链路 尽量缩短客户端和数据库的链路，不要太多的跳数，比如NAT，PROXY，等越多，性能越差。 2 连接方式 尽量使用长连接，不要使用短连接，短连接的打开开销非常...
金仓数据库KingbaseES 统计信息收集器没有响应问题分析
arthemis_14的博客
04-27 338
服务器正常关闭时，统计数据会拷贝sys_stat_tmp目录的副本永久的存储在sys_stat目录中，这样在服务器重启后统计信息能被正常的加载访问。这些文件被存储在参数stats_temp_directory指定的目录中，默认是sys_stat_tmp.kingbase数据库日志提示：统计信息收集器没有响应/Stats collector is not responding。Kingbase数据库后台进程:统计信息收集器进程stats collector。类别:服务器事件(Server Events)
pg9.6并行优化配置
03-23
pg 并行优化，详细讲解pg 并行的原理及如何进行并行优化配置，详细描述了各种参数的配合使用；9.6 版本现支持一些并行查询操作，因而能够利用服务器上的几个或所有的 CPU 内核来进行运算，这样返回查询结果更快。 ...
PG9.6查询优化器处理流程1
08-04
PG9.6查询优化器处理流程1 PG9.6查询优化器处理流程1是PostgreSQL 9.6版本中查询优化器的处理流程。查询优化器是数据库管理系统中的一种核心组件，负责将用户提交的查询语句转换为高效的执行计划，以便快速地检索...
mysql函数ifnull在pg 9.6中的实现
01-19
工作中迁移mysql至pg 9.6，遇到mysql中的ifnull函数在pg中没有，pg中函数coalesce与ifnull功能相同，但函数名不同，需要修改应用。ifnull也在SQL标准中，pg此处不符合sql标准规范。本人尝试修改pg源码添加了ifnull...
pg9.6_rpm.zip
12-25
【标题】"pg9.6_rpm.zip" 提供的是PostgreSQL 9.6的离线安装包，专为那些无法或不便连接到互联网的环境设计。PostgreSQL是一种开源的对象关系型数据库管理系统（ORDBMS），它以其强大的功能、稳定性和高度的可扩展性...
docker下载pg9.6
03-05
可以使用以下命令下载pg9.6的docker镜像： docker pull postgres:9.6 然后可以使用以下命令启动一个pg9.6的容器： docker run --name some-postgres -e POSTGRES_PASSWORD=mysecretpassword -d postgres:9.6 ...
pgsql9.6 绿色版
11-16
绿色版pgsql9.6的文件包，直接解压出来通过命令行或者代码创建pgsql服务以及账号，建库建表操作，免安装操作，可以集成到程序中达到免安装的效果
PostgreSql9.6
11-30
PostgreSql-9.6(pgsql),windows 64位安装，需要的同学可以下载去安装哦，安装包内置pgsql图形界面管理工具（安装目录/pgAdmin4/bin/pgAdmin4.exe就是啦）
KingbaseES 统计信息收集器没有响应问题分析
lyu1026的博客
02-28 250
统计信息收集器没有响应/Stats collector is not responding 问题现象: kingbase数据库日志提示：统计信息收集器没有响应/Stats collector is not responding 示例Kingbase日志输出: LOG: using stale statistics instead of current ones because stats col...
12个提升PostgreSQL_TSDB 插入性能的建议
DEEPEXI_2048Lab的博客
07-14 1585
本文将分别从以下两个方面给出提升插入性能的建议: 一提升PostgreSQL性能；二选择并配置TSDB以获得更好的插入性能。 其中一些方法可能会让您感到比较新奇，但所有十二种方法都将帮助您在使用PostgreSQL和TSDB时提升写入性能。
PG数据库单表插入大量数据引发性能故障
weixin_34009794的博客
10-16 4003
postgres数据库大批量单表导入数据引发性能故障 因公司经营管理策略原因，我们地区部门还是以开发外包和产品服务为主，对测试外包服务销售工作要求占比不高，而测试部门本来有四五个性能测试人员，加上老员工都比较积极做事在测试团队建设管理上不用花费太多精力。估计因为我对数据库、tomcat、linux性能这块了解比较深以前相关的测试环境都是我搭建部署，一...
配置安装postgresql 9.6
welcome to daijiguo's blog
09-28 2511
一、下载postgresql的yum源 yum install -y https://download.postgresql.org/pub/repos/yum/9.6/redhat/rhel-7-x86_64/pgdg-centos96-9.6-3.noarch.rpm 二、安装postgresql yum install -y postgresql96-server postgresql96...
PG10的函数比PG9.6变化不少
msdnchina的专栏@JiNan,ShanDong
11-09 1497
PG10的函数比PG9.6变化不少
压测 tpcb pgbench 之二 混合测试
一名数据库爱好者的专栏
11-20 677
os: centos 7.4 db: postgresql 10.6 # cat /etc/redhat-release CentOS Linux release 7.4.1708 (Core) # su - postgres -c "psql -c \"select version();\""
docker pg9.6 主从配置
最新发布
10-11
Docker用于容器化应用，而PostgreSQL（pg9.6）是一款流行的开源关系型数据库管理系统。要在Docker容器中设置主从复制（Master-Slave replication），你需要执行以下步骤： 1. **安装PostgreSQL Docker镜像**： 使用官方的PostgreSQL镜像，例如`postgres`, 或者如果需要特定版本如pg9.6，你可以使用`library/postgres:9.6-alpine`。 ```sh docker pull library/postgres:9.6-alpine ``` 2. **启动主数据库（Master）**： 创建一个新的容器并映射数据卷到容器内部，以便持久存储数据。在启动时指定 `-e POSTGRES_PASSWORD=mysecretpassword` 设置密码，确保容器监听网络端口供其他容器连接。 ```sh docker run -d --name my_postgres_master \ -p 5432:5432 \ -v /path/to/local/data:/var/lib/postgresql/data \ -e POSTGRES_PASSWORD=mysecretpassword \ library/postgres:9.6-alpine ``` 3. **启动从数据库（Slave）**： 创建另一个容器并设置为从主数据库复制。同样，创建数据卷，指定数据库密码和网络参数。使用`-e MASTER_HOST=$(hostname)` 和 `--link my_postgres_master:maindb` 命令，连接到主数据库。 ```sh docker run -d --name my_postgres_slave \ -p 5433:5432 \ -e POSTGRES_PASSWORD=mysecretpassword \ -e MASTER_USER=your_username \ -e MASTER_HOST=$(hostname) \ --link my_postgres_master:maindb \ library/postgres:9.6-alpine ``` 4. **配置主从复制**： 在主数据库上运行SQL命令启用wal接收器（walreceiver），然后在从库上运行`pg_basebackup`或`streaming-replication-start`等命令启动复制。这通常在启动时由脚本处理，但也可以手动进行。 ```sql -- 主库（master） ALTER SYSTEM SET listen_addresses = '*'; CREATE USER your_username WITH REPLICATION ENCRYPTED PASSWORD 'your_password'; -- 从库（slave） pg_basebackup -h $(hostname) -U your_username -P your_password -Ft -D /var/lib/postgresql/data ``` 5. **监控与故障转移**： 可以考虑使用如pgAdmin或Prometheus、Grafana这样的工具对主从模式进行管理和监视，以防主库出现问题时能自动切换到从库。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值