group by 替代distinct

最新推荐文章于 2023-03-16 14:08:09 发布
最新推荐文章于 2023-03-16 14:08:09 发布
阅读量2.1k 收藏
点赞数
分类专栏： HTTP协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhaoyangjian724/article/details/17192447
版权
HTTP协议 专栏收录该内容
44 篇文章 31 订阅 ¥39.90 ¥99.00
订阅专栏 
SQL> select distinct employee_id,first_name from test1;

107 rows selected.


Execution Plan
----------------------------------------------------------
Plan hash value: 255531131

------------------------------------------------------------------------------------
| Id  | Operation	   | Name  | Rows  | Bytes |TempSpc| Cost (%CPU)| Time	   |
------------------------------------------------------------------------------------
|   0 | SELECT STATEMENT   |	   |  6647K|   158M|	   | 67481   (1)| 00:13:30 |
|   1 |  HASH UNIQUE	   |	   |  6647K|   158M|   229M| 67481   (1)| 00:13:30 |
|   2 |   TABLE ACCESS FULL| TEST1 |  6647K|   158M|	   | 19570   (1)| 00:03:55 |
------------------------------------------------------------------------------------

Note
-----
   - dynamic sampling used for this statement (level=2)


Statistics
----------------------------------------------------------
	  4  recursive calls
	  0  db block gets
了解本专栏 订阅专栏 解锁全文
scan724
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
mysql group by替代_mysql中group by和order by同时使用无效的替代方案
weixin_42493639的博客
01-26 872
前言最近一年由于工作需要大部分使用的都是NoSql数据库，对关系型数据库感觉越来越陌生，一个由group by和order by 引发的血案由此而生。在此做个记录，以备不时之需。需求(得到所有barCode的最新的一条数据)首先，看一下整体的表结构。 现在查找每个barCode中最新的数据。由于数据太多，不是很好看到效果。我们就拿一个barCode为4565789的数据做示例。SELECTb...
Group BY 的另一种写法
03-22
由于没有提供具体的博客内容，以上分析是基于常见的SQL查询优化技术和`GROUP BY`的替代写法进行的推测。在实际阅读博客或文档（如`大数据量分组.doc`）时，应能获取更详细的信息和具体案例。通过深入学习这些内容，...
DISTINCT 和 GROUP BY 的实现区别及隐式排序
wa123579的博客
11-18 1547
先说结论 语义相同，都走索引情况下，两者效率差不多，distinct 可以看作是特殊的 group by 语义相同，不走索引情况下，distinct 会更快一些，原因是 group by 可能会触发 filesort 进行排序 测试 DISTINCT GROUP BY 隐式排序 MySQL :: MySQL 5.7 Reference Manual :: 8.2.1.14 ORDER BY Optimization 在 MySQL 8.0 之前，GROUP BY 会默认根据作用字段进行排序。在能
巧用group by替代 distinct【记录一次sql之旅】
weixin_33806914的博客
04-13 2937
2019独角兽企业重金招聘Python工程师标准>>> ...
HQL底层原理及优化：（一）使用group by代替distinct，以防数据倾斜。
张之海的博客
04-20 1722
本文转载自hive性能优化使用group by替代distinct原理-weixin_42412645，感谢作者的知识分享，文章已讲解得非常清晰，笔者不再赘述。 日常业务统计中经常使用除重（distinct）操作，但是当出现某一组数据特别多时就会出现数据倾斜。于是在SQL编写的时候就使用group by来代替distinct，从而让执行效率提升。下面说一下个人的理解。 原始数据page_test表...
标量子查询优化（用group by 代替distinct）
weixin_30597269的博客
12-06 244
标量子查询优化 当使用另外一个SELECT 语句来产生结果中的一列的值的时候,这个查询必须只能返回一行一列的值。这种类型的子查询被称为标量子查询 在某些情况下可以进行优化以减少标量子查询的重复执行,但更糟糕的场景是每一行都需要标量子查询的执行。 explain plan for SELECT B.EMP_NO, B.CUST_NO, ...
sqlserver中distinct的用法(不重复的记录)
09-11
在例子中，`SELECT id, name, COUNT(DISTINCT name) FROM table GROUP BY name;` 将为每个唯一名字提供其出现的次数，尽管最后一个列是多余的。 5. **替代方法**： 有时，可以使用 `GROUP BY` 或 `JOIN` 操作来...
MySQL关键字Distinct的详细介绍
09-09
如果你发现`DISTINCT`不能按预期工作，可以考虑使用`GROUP BY`语句。`GROUP BY`可以用来对特定列进行分组并计算每个组的聚合函数，如`COUNT()`或`SUM()`。对于去除重复值，你可以结合`GROUP BY`和`HAVING COUNT(*) ...
MySQL DISTINCT 的基本实现原理详解
12-16
MySQL中的`DISTINCT`关键字用于从查询结果中去除重复的行，它在处理数据时与`GROUP BY`语句有着类似的底层实现。然而，两者之间存在微妙的差异。`DISTINCT`主要的目标是去重，而不是对数据进行聚合计算。 在实现...
mysql代码-distinct去重
07-14
3. 分组（GROUP BY）代替DISTINCT：在某些情况下，`GROUP BY`可以替代`DISTINCT`，尤其是需要对某列进行聚合操作时。 4. 使用子查询：先通过子查询找出不重复的值，再在主查询中使用这些值。 六、main.mysql文件...
hive性能优化使用group by替代distinct原理
weixin_42412645的博客
06-02 7772
日常业务统计中经常使用除重（distinct）操作，但是当出现某一组数据特别多时就会出现数据倾斜。于是在SQL编写的时候就使用group by来代替distinct，从而让执行效率提升。下面说一下个人的理解。 原始数据page_test表 1.distinct底层实现原理（select city,count（distinct user_id） from page_test group by ci...
hive的group by与distinct的区别及性能测试比较
bboy枫亭的博客
07-29 910
Hive去重统计 相信使用Hive的人平时会经常用到去重统计之类的吧，但是好像平时很少关注这个去重的性能问题，但是当一个表的数据量非常大的时候，会发现一个简单的count(distinct order_no)这种语句跑的特别慢，和直接运行count(order_no)的时间差了很多，于是研究了一下。 先说结论:能使用group by代替distinc就不要使用distinct，例子： 实际论证 order_snap为订单的快照表 总记录条数763191489，即将近8亿条记录,总大小:108.877GB,存
mysql group by 替代_sql优化用group by 函数代替分析函数
weixin_39578899的博客
01-25 766
SQL> Select dfId,2 Id As Client_Id,3 Login As Client_Name,4 To_Char(Created_Date, 'yyyy-mm-dd') As Start_Date,5 Sum(1) Over() As Total_Count6 From (Select a.*7...
group by ；distinct去重
qq_43528451的博客
05-11 2794
都是用来去重的，去重的，group by 主要是用来分组的；distict专门用来去重的。 结论：能使用group by代替distinct就不要使用distict； 原因：使用distinct（id）会将所有的id都shuffle到一个reduce里面，数据倾斜， group by 起来多个reducer，将数据分布到多态机器上执行，时间就非常快。 由于没有手动的指定reduce的个数，Hive会根据数据的大小动态的指定Reduce大小，也可手动指定 如果想在一条语句中考一条语句里看总记录条数以及去.
hive优化之distinct转group by实战
cclovezbf的博客
12-29 1116
说明：一个公司有多个业务biz_id，每个业务收款的时候通过不同或者相同的account去收款 业务需要 需要计算出该公司有过滤重复后biz_count 和过滤重复后的account_count 1先来个distinct ，占用内存，容易oom，所以一般都会把distinct改为group by select company_name,count(distinct biz_id),count(distinct account_id) from odsiadata.ia_fdw_b_profi..
达梦数据库group by的两个替代方案
学习记录和总结
03-16 2041
此外，在达梦数据库中，也可以使用窗口函数来替代 GROUP BY。窗口函数可以对数据进行分组、排序、聚合等操作，而不需要使用 GROUP BY 子句。例如，可以使用子查询来将分组和聚合操作拆分开来，然后再进行联接操作。以上是在达梦数据库中替代 GROUP BY 的两个常用方法：子查询和窗口函数。具体的替代方法应该根据实际情况以及数据的特点来选择。，这是因为达梦数据库不支持标准 SQL 中的 GROUP BY 子句。在达梦数据库中，可以使用子查询或者窗口函数来替代。而该语句无法正常执行并提示错误信息。
SQL中groupby和distinct的区别
achilles_01的博客
09-27 2748
单列去重 select distinct num from test_test; select num from test_test group by num; 多列去重 select distinct id,num from test_test; select id,num from test_test group by id,num; 最后得到结果都是一样的，下面讨论一下效率的比较， 先了解一...
mysql distinct 与 group by
龙行九天的专栏
08-10 420
欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦： Markdown和扩展Markdown简洁的语法 代码块高亮 图片链接和图片上传 LaTex数学公式 UML序列图和流程图 离线写博客 导入导出Markdown文件 丰富的快捷键 快捷键 加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl
如何使用 group by 替代 distinct
最新发布
05-10
在某些情况下，可以使用 group by 替代 distinct。例如，以下 SQL 查询使用 distinct： ``` SELECT DISTINCT column_name FROM table_name; ``` 可以使用 group by 替代： ``` SELECT column_name FROM table_...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

scan724

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值