按照指定字段做聚合(partition by)，随机(row_number)取指定数量的数据

已于 2022-02-20 16:43:47 修改
阅读量481 收藏 1
点赞数
分类专栏： hive 文章标签： sql 数据库 database
于 2021-11-07 18:03:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/airstudy/article/details/121194645
版权
本文通过举例说明如何在SQL中使用`PARTITION BY`进行分组，并结合`ROW_NUMBER()`函数随机选取每个分组内的特定数量记录。例如，对于一个包含name和score列的表，目标是获取每个name值的前2条数据。
摘要由CSDN通过智能技术生成

举个🌰，有以下表内数据

name |score

a |10
a |11
b |9
b |10
b |8
a |3
a |7
c |4
c |6
c |5
c |9
取name中每个值得2条数据

select
   *
from
   (select
     *,
       row_number() over (partition by name order by rand(
最低0.47元/天 解锁文章
leap_ruo
关注
专栏目录
Hive中sql partition by 、Group by、Over 、Rank、Dense_Rank()、Row_number()区别
杨鑫newlife的专栏
03-07 4027
我们如何统计一个班级考试的课程的前三名？ 已知表： Lesson（no，course, score） 实例一：对比Partition by 与Group by Select a.course, a.score from ( Select course, score, row_number() over(partition by course order by score...
row_number 和 cte 使用实例：分组轮流排班
文盲的专栏
04-03 392
使用开窗函数，日期函数，列转行完成排班表
oracle中rownum和row_number()
09-10
主要介绍了oracle中rownum和row_number()的使用方法以及区别和联系，十分的详细，有需要的小伙伴可以参考下。
row_number()函数随机排序
u010918936的博客
07-18 1489
ID与XID是联合主键，row_number()里面只按ID分组，存在同一ID同一DT有多条数据，按DT降序排序会失效，此时函数会对这多条数据随机排出123名，每执行一次脚本，结果会有差异。 如果外层查询是通过限制`WHERE RN=1`来取值，那取值结果就会存在随机性。...
在论坛中出现的比较难的sql问题：5(row_number函数 分页、随机返回数据)
weixin_30344795的博客
10-21 148
最近，在论坛中，遇到了不少比较难的sql问题，虽然自己都能解决，但发现过几天后，就记不起来了，也忘记解决的方法了。 所以，觉得有必要记录下来，这样以后再次碰到这类问题，也能从中获取解答的思路。 1、在inner join后，如何分页。 http://bbs.csdn.net/topics/390617884 sqlserver 对一张表进行...
对于想对数组中某个字段进行数量聚合的两种情况
goxingman的博客
05-10 2160
一、不管单条doc中的对应数组有出现了几次相同元素，都按一次来计算， mapping设计数组不为nested 举例：下面这个数据中，如果id进行聚合，那么虽然id=22出现两次，但是聚合出来id：22 数量为1，他是统计的doc条数 场景：比如主体doc为爱好，数组里面是人名，此种聚合可以统计出美每个人名有几种爱好 "_source": { "id": 1, "files": [{ "id": "22", "filename": "方法" }, { "id": "22"
row_number()和newid() 进行活动抽奖
christy_yang的博客
08-21 316
要求随机抽取5名人员作为抽奖中奖人员 sql server 中 按A 列分组后 按 B 列排序： row_number() over(partition by A order by B ) 对表中的数据随机排列显示 ： newid() 代码： select * from ( select ROW_NUMBER() over(order by newid() )as rn, ...
SQLServer中Partition By及row_number 函数使用详解
09-10
在这个例子中，`PARTITION BY A` 将数据按照 `A` 字段进行分区，`ORDER BY A DESC` 让每个分区内的行按 `A` 的降序排列。`ROW_NUMBER()` 为每个分区的行分配一个数字，`NUM` 列显示了每个 `A` 类别下记录的顺序。 ...
Mysql 的ROW_NUMBER() 和分区函数的使用 PARTITION BY的使用
最新发布
qq_52400091的博客
12-15 927
partition by关键字是分析性函数的一部分，它和聚合函数不同的地方在于它能返回一个分组中的多条记录，而聚合函数一般只有一条反映统计值的记录，partition by用于给结果集分组，如果没有指定那么它把整个结果集作为一个分组，分区函数一般与排名函数一起使用。ROW_NUMBER()函数将针对SELECT语句返回的每一行，从1开始编号，赋予其连续的编号。在查询时应用了一个排序标准后，只有通过编号才能够保证其顺序是一致的，当使用ROW_NUMBER函数时，也需要专门一列用于预先排序以便于进行编号。
取整 & row_number & for & 动态DDL & 取随机值dbms_random.value
u010719917的专栏
09-14 1433
declare begin execute immediate "DDL" end ; drop table table1 purge;     查询数据库中的任意一条语句sql、 random . mysql： select * from table order by rand() limit 1   PostgreSQL: select * from table o
抽奖机，从范围内随机抽取结果
09-17
抽奖机 根据定制的列表进行随机抽取中奖结果。 需要jdk1.7环境 待抽取列表txt文件定制。 适用于抽取专家，抽取幸运员工，幸运单位等场景。
partition、快排和随机快排
weixin_42582008的博客
09-18 737
做了《剑指offer》中最小的k个数的题目（详情可见这篇博客https://blog.csdn.net/weixin_42582008/article/details/100937950） 和数组中出现次数超过一半的数字的题目（详情可见这篇博客https://blog.csdn.net/weixin_42582008/article/details/100760644） 都可以用partit...
分区函数Partition By的用法
灯火入眉的博客
02-17 1297
group by是分组函数，partition by是分区函数（像sum()等是聚合函数），注意区分。 1、over函数的写法： over（partition by cno order by degree ） 先对cno 中相同的进行分区，在cno 中相同的情况下对degree 进行排序 2、分区函数Partition By与rank()的用法“对比”分区函数Partition By与row_number()的用法 例：查询每名课程的第一名的成绩 （1）使用rank() SELECT *
SPARK-SQL - 读写数据的时候使用分区 partitionBy()
小哇
08-11 5824
关键代码partitionBy() dataset_1.write() .mode(SaveMode.Overwrite) .partitionBy("year", "month", "day") .parquet(Utils.BASE_PATH + "/trackerSession_partition"); 代码示例 import org.apache.spark.sql.Dataset; impo.
parallelize中指定partition个数的详解
qq_21355765的博客
11-20 2428
val rdd  = sc.parallelize(List(1,2,3,4,5,6,7),3)生成RDD的时候，RDD中的partition是如何决定的 def parallelize[T: ClassTag](       seq: Seq[T],       numSlices: Int = defaultParallelism): RDD[T]
Python列表元素为字典时，如何根据其中某个相同的键值进行元素合并
曲鸟
10-15 9483
Python列表元素为字典时，如何根据其中某个相同的键值进行元素合并
SQL分组获取随机记录
肥货
12-30 4091
主要是利用row_number() over()函数以及DBMS_RANDOM.value产生的随机数大小排序进行，再对固定的排序序号进行统一取值， select id, empno , row_number() over(partition by empno order by DBMS_RANDOM.value) as row_num from emp t;
常用SQL——row_number()介绍
lezhuximing的博客
11-10 3295
其中，碰到相同的值，排序的序号不会重复，而是按照相同的值随机排序，递增进行序号编码。如果是升序排序，则去掉上面示例中的“DESC”即可。上述示例中的ro_no即为排序序号。
SQL对某字段进行GROUP BY同时要获取其他字段方法
wh445306
06-12 5276
--建表语句 CREATE TABLE tb1( ikey int, value int, Test1 varchar(20) NULL, Test2 varchar(20) NULL, ) drop table tb1 SELECT * FROM tb1 insert into tb1(ikey,value,Test1,Test2) values (1,55,'AA','BB'), (1,20,'AA1','BB1'), (4,63,'AA2','BB2'), (1,89,'AA3','BB3.
hive row_number() over()去重和group by的区别
05-09
`group by` 是一种聚合函数，它可以将表中的数据按照指定的字段分组，然后对每组数据执行聚合操作（例如 `count()`、`sum()`、`avg()` 等）。使用 `group by` 可以快速去除表中的重复行。例如，以下 SQL 语句可以...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值