【postgresql】数据聚合之PERCENTILE_CONT

最新推荐文章于 2024-03-25 19:05:05 发布
最新推荐文章于 2024-03-25 19:05:05 发布
阅读量2.9k 收藏 1
点赞数
分类专栏： # MySQL 文章标签： postgresql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lluozh2015/article/details/107077373
版权
在处理大量性能测试数据时，通过数据库直接聚合而非下载后再聚合能显著提升效率。PostgreSQL的Aggregate Functions提供了PERCENTILE_CONT函数，用于计算有序集合的线性内插百分位数。在实际案例中，对比了使用数据库聚合与拉取数据后聚合的方法，前者在处理1000w+数据时，性能表现远优于后者，如在30w+数据上的操作，数据库聚合只需几百毫秒，而拉取后聚合则需要近20秒。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在实现性能测试报告聚合的时候，一开始使用的方案是通过数据库查询load出所有数据，然后不同维度数据不同消费者消费聚合对应的数据，这样实现当数据量超过1000w+时下载速度无法解决

因为使用的数据库是TimescaleDB，可以使用数据库直接聚合数据的方式

Aggregate Functions

PostgreSQL提供了一系列的 聚合方法
其中我们可以找到有序集合聚合函数
在这里插入图片描述

PERCENTILE_CONT

ERCENTILE_CONT 在对值进行排序后计算值之间的线性内插

PERCENTILE_CONT
是一种假定连续分布模型的逆分布函数。该函数具有一个百分比值和一个排序规范，并返回一个在有关排序规范的给定百分比值范围内的内插值

语法

PERCENTILE_CONT ( percentile )
WITHIN GROUP
最低0.47元/天 解锁文章
oracle 百分位数,Oracle分析函数PERCENTILE_CONT，percentile函数
weixin_29970399的博客
04-04 3126
Oracle分析函数PERCENTILE_CONT，percentile函数查询各部门中薪水分布处于25%、50%、75%位置的人的薪水，percent_rank()是确定排行中的相对位置。create table EMP(EMPNO NUMBER(4) not null,ENAME VARCHAR2(10),JOB VARCHAR2(9),MGR NUMBER(4...
PERCENTILE_CONT
Cecilia_W422的博客
03-23 5149
PERCENTILE_CONT ( <expression1> ) WITHIN GROUP ( ORDER BY <expression2> [ ASC | DESC ] ) PERCENTILE_CONT和PERCENTILE_DISC都是为了计算百分位的数值，比如计算在某个百分位时某个栏位的数值是多少。他们的区别就是前者是连续型，后者是离散型。CONT代表conti...
【PostgreSQL】函数之百分位数&中位数：percentile_cont()
热门推荐
喜东东的博客
06-11 2万+
搜索了很久，实在没找到pg内有关求百分数的内置函数，后来在stackoverflow中找到了创建percentile_cont函数的代码： 一、创建percentile_cont函数 创建array_sort () &amp;lt;用于数组排序&amp;gt; CREATE OR REPLACE FUNCTION array_sort (ANYARRAY) RETURNS ANYARRAY LA...
Pgsql中位数查询
最新发布
2401_83441752的博客
03-25 1002
如果你想要根据某个分组计算中位数，可以在。表示计算50%百分位数，即中位数。指定了计算中位数时的排序依据。的值分组，然后在每个组内计算。是你想要计算中位数的列，
PostgreSQL中计算百分位数和中位数
neweastsun的专栏
05-11 1万+
PostgreSQL9.4版本之后很容易对一组值计算百分位数，主要是用有序集合的聚集函数percentile_cont 和 percentile_disc。 这两个函数类似，但对合并结果有些差异： percentile_disc 返回最接近请求百分位的离散值。 percentile_cont 返回基于分布的多个值的连续值(插值)。更精确，包括两个输入值直接的数（带小数）。 下面通过示例进行讲解，首先我们准备一个示例表和数据。 create table thing ( value int ); ins
sql PERCENTILE_CONT 计算一组数的线性差值
luoganttcc的博客
08-17 1292
使用线性插值计算 value_expression 的指定百分位值。 如果不存在 RESPECT NULLS，此函数会忽略 NULL 值。如果存在 RESPECT NULLS： 两个 NULL 值之间的插值返回 NULL。 一个 NULL 值与一个非 NULL 值之间的插值返回非 NULL 值。 以下示例计算一个值列中的某些百分位值，同时忽略 null。 SELECT PERCENTILE_CONT(x, 0) OVER() AS min, PERCENTILE_CONT(x, 0.01) OV
Apache Calcite-添加聚合函数（MODE Aggregation Function）
Nobigo
08-12 1068
由于在Apache Calcite社区贡献了聚合函数的PR且被合入，这篇博客主要记录一下聚合函数的实现过程以及注意事项。 添加聚合函数步骤 在Parser.jj添加关键字（这个可以根据实际情况添加，由于当前MODE函数只在PostGresql中实现，因此在合入时候没有将MODE添加为关键字） 新增函数解析 在SqlKind新增Aggregation Function函数MODE 在SqlStdOperatorTable（中保存了SqlOperator和SqlFunction）中新增MODE函数定义
PostgreSQL 10 - 分组集合和排序集合
weixin_43364172的博客
12-26 4879
PostgreSQL 10 - 分组集合和排序集合grouping sets先加载例子数据使用分组集合性能组合grouping sets和FILTER使用ordered sets理解假设聚合 grouping sets 很多人都熟悉GROUP BY和HAVING。但是，你熟悉CUBE、ROLLUP和GROUPING SETS吗？ 先加载例子数据 我们使用BP能源报告的数据。 数据结构是 CREAT...
pgsql聚合函数
06-01
3. 偏态聚合函数：例如SKEW、KURTOSIS、PERCENTILE_CONT、PERCENTILE_DISC等。 4. 原位聚合函数：例如BIT_AND、BIT_OR、BOOL_AND、BOOL_OR等。 5. 窗口聚合函数：例如ROW_NUMBER、RANK、DENSE_RANK、NTILE等。 6....
SQL窗口函数与聚合表达式
oops python!
03-06 1734
SQL窗口函数与聚合表达式
PostgreSQl函数部分阅读笔记
06-16
PostgreSQl函数部分阅读笔记 关于函数部分在PostgreSQL中的实现问题的解释 聚集函数
SQL SERVER中PERCENTILE_CONT和PERCENTILE_DISC
LeeWhoee University
03-22 6325
用数据实例解释SQL SERVER中PERCENTILE_CONT和PERCENTILE_DISC
oracle 百分位数,Oracle分析函数PERCENTILE_CONT
weixin_39762856的博客
04-04 400
查询各部门中薪水分布处于25%、50%、75%位置的人的薪水，percent_rank()是确定排行中的相对位置。create table EMP(EMPNO NUMBER(4) not null,ENAME VARCHAR2(10),JOB VARCHAR2(9),MGR NUMBER(4),HIREDATE DATE,SAL NUMBER(7,2),C...
SQL Server ->> PERCENTILE_CONT、PERCENTILE_DISC 和 PERCENT_RANK 函数
weixin_30611509的博客
10-19 875
PERCENTILE_CONT和PERCENTILE_DISC都是为了计算百分位的数值，比如计算在某个百分位时某个栏位的数值是多少。他们的区别就是前者是连续型，后者是离散型。CONT代表continuous，DISC代表discrete。PERCENTILE_CONT是连续型意味它考虑的是区间，所以值是绝对的中间值。而PERCENTILE_DISC是离散型，所以它更多考虑向上或者向下取舍...
Oracle分析函数PERCENTILE_CONT
关注系统性能调优
11-19 1万+
查询各部门中薪水分布处于25%、50%、75%位置的人的薪水，percent_rank()是确定排行中的相对位置。 SQL> select e.ename,e.sal,e.deptno,        percent_rank() over(partition by deptno order by sal desc) p_rank,        PERCENTILE_CONT(0) w
达梦数据库之 PERCENT_RANK()over()函数和 PERCENTILE_CONT() WITHIN GROUP()OVER()函数详解
牛排煎黑椒的博客
09-13 2734
PERCENTILE_CONT函数也是Oracle中用于计算分位数的窗口函数之一。与PERCENTILE_DISC函数不同的是，PERCENTILE_CONT函数会返回一个连续值，而不是精确匹配给定百分位的数据值。
postgresql计算百分位点和百分位数
qq_28647809的博客
07-27 5634
postgresql计算百分位点和百分位数 计算百分位点 两种方法：自行计算和使用postgresql内置函数计算 1.1. 使用（row -1 ）/ （count - 1）方式，即该数所在位置（从小到大排列）/ 该列总个数 首先,使用row_num函数从小到大排列： select * from( select row_num() over(partition by id字段 order by 计算字段)rn,* from 表名); 然后，计算总数: select count(*) as cont f
窗口分析函数_17_计算百分位数
数据科学汇集
04-07 1760
计算百分位数 需求描述 需求：将EMP表里的部门编号为20的SAL字段按照由高到低排序取50百分位。 解决方法:通过percentile_cont OVER()来完成. 注: 数据库数据集SQL脚本详见如下链接地址 员工表结构和数据初始化SQL脚本 SQL代码 -- SQL Server、Oracle、Mysql 8.0 SELECT percentile_cont(0.5)WITHIN GROUP (ORDER BY sal) ...
sql 求分位数
chensq_yinhai的博客
08-17 1万+
– 1 oracle求分位数 SELECT RES3.ORG_NO_5, RES3.YM , -- X1的上四分位数 PERCENTILE_CONT(0.75) WITHIN GROUP(ORDER BY RES3.X1 ASC) AS X1_75, -- X1的上中位数 PERCENTILE_CONT(0.50) WITHIN GROUP(ORDER BY RES3.X1 ASC) AS X1_50, -- X1的下四分
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

sysu_lluozh

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值