【 MySQL/Hive】SQL中distinct的使用方法,以及与row_number() over()的区别

在表中,可能会包含重复值。这并不成问题,不过,有时您也许希望仅仅列出不同(distinct)的值。关键词 distinct用于返回唯一不同的值。

表A:
在这里插入图片描述
表B:
在这里插入图片描述
1.作用于单列

select distinct name from A

执行后结果如下:
在这里插入图片描述
2.作用于多列
示例2.1

select distinct name, id from A

执行后结果如下:
在这里插入图片描述
实际上是根据name和id两个字段来去重的,这种方式Access和SQL Server同时支持。
示例2.2

select distinct xing, ming from B

返回如下结果:
在这里插入图片描述
返回的结果为两行,这说明distinct并非是对xing和ming两列“字符串拼接”后再去重的,而是分别作用于了xing和ming列。
3.COUNT统计

select count(distinct name) from A; --表中name去重后的数目, SQL Server支持,而Access不支持

count是不能统计多个字段的,下面的SQL在SQL Server和Access中都无法运行。

select count(distinct name, id) from A;

若想使用,请使用嵌套查询,如下:

select count(*) from (select distinct xing, name from B) 
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
HiveDISTINCT、GROUP BY和ROW_NUMBER()都可以用于去重,但它们的效率和使用场景有所不同。 DISTINCTDISTINCT是用于从查询结果删除重复的行。它通常适用于查询结果较小的情况。如果查询结果比较大,DISTINCT可能会变得非常慢。因为在执行DISTINCT操作时,需要对整个结果集进行排序和去重操作,这是一个非常耗费资源的过程。此外,DISTINCT还会影响查询的性能,因为它需要将数据从Map阶段传递到Reduce阶段,这会导致额外的网络开销。 GROUP BY: GROUP BY是用于对查询结果进行分组和聚合操作。它的效率比DISTINCT要高,因为它只需要对每个分组进行聚合操作,而不需要对整个结果集进行排序和去重操作。但是,如果分组键的基数比较大,GROUP BY可能会变得非常慢。 ROW_NUMBER(): ROW_NUMBER()函数可以用于给查询结果的每一行分配一个唯一的数字。它通常用于分页操作。ROW_NUMBER()的效率比DISTINCT和GROUP BY要高,因为它只需要对查询结果进行遍历,而不需要对整个结果集进行排序和去重操作。但是,如果查询结果比较大,ROW_NUMBER()也可能会变得非常慢。 总的来说,对于去重操作,如果查询结果比较小,可以使用DISTINCT。如果查询结果比较大,并且需要进行分组和聚合操作,可以使用GROUP BY。如果需要进行分页操作,可以使用ROW_NUMBER()。但是,具体使用哪种方式取决于具体的查询场景。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值