当SQL Query跑得很慢的时候...--主要瓶颈

最新推荐文章于 2023-02-07 17:12:40 发布
最新推荐文章于 2023-02-07 17:12:40 发布
阅读量950 收藏
点赞数
分类专栏： SQL Server 文章标签： sql query sql server random algorithm 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/buttercookie/article/details/5722022
版权
本文探讨了当SQL查询运行缓慢时如何进行性能调优。重点介绍了影响SELECT语句性能的三大因素：Random IO、Sequential IO和CPU Bottleneck，并通过实例说明了选择合适的查询算法的重要性。建议在优化SQL时，应深入理解服务器执行查询的操作，以减少不必要的资源消耗。
摘要由CSDN通过智能技术生成

当SQL Query跑得很慢的时候， 这是件多么美妙的事情...

 

每天清晨，慵懒地来到公司，机械化的点开SQL客户端，华丽地按下更新数据按钮。然后倒水泡茶，上开心，逛论坛，吃饭聊天。。。转眼夕阳西下。哇！数据更新完毕。套用模板，发出Report，回家吃饭。

 

多么令人艳羡的工作。但是我的Query没有跑得那么慢啊！没关系，看完本文你一定能让你的Query跑得更慢！(#大误)

 

言归正传，Butter将为你逐步揭示SQL语句性能调优办法。首先让我们来看影响SELECT语句性能的三座大山 (排名绝对分先后，影响力以指数级下降):

 

 

Random IO

 

Random IO是性能的最大杀手，一次Random IO往往意味着一次HardDisk 的Seek Time。一般桌面电脑的seek time在9ms左右取决于硬盘的RPM。至于服务器seek time 可以下降到3ms。

 

3ms以为着什么？ 以现在较为常规服务器磁盘每秒300MB的传输率计算，3ms可以读0.9MB数据，也就是900K。以一个Page 8KB计算，假设每一个page存100条记录，3ms 可以大约读取10,000条连续数据记录~~~~10,000条连续数据记录~~~~~回音

 

换句话说，每当服务器进行一次Random IO，需要省下读取10,000条连续数据的时间才有赚不亏。(画外音1: 不考虑空间问题，Non-Cluster Index实际上就是做了

最低0.47元/天 解锁文章
buttercookie
关注
专栏目录
当SQL Query跑得很慢的时候...-- Random IO
Butter World
07-16 749
<br />紧接上文， 我们知道Random IO是一次非常昂贵的操作，同样的时间大约可以读取10,000条连续记录。 那么SQL Server 在什么时候会发生Random IO呢<br /> <br />Index Seek<br /> <br />我们知道在SQL Server中，无论是cluster index 还是non-cluster index都最终以B tree的形式存在于存储介质中。而在index seek发生的时候，从root节点出发，经过每一层中间节点的跳转都有可能导致一次Random
SQL（及存储过程）跑得太慢怎么办？
极客重生
08-19 366
SQL 作为目前最常用的数据处理语言，广泛应用于查询、跑批等场景。当数据量较大时，使用 SQL（以及存储过程）经常会发生跑得很慢的情况，这就要去优化 SQL。优化 SQL 有一些特定的套路，通常先要查看执行计划来定位 SQL 慢的原因，然后针对性改写来优化 SQL，比如对于连续数值判断可以用 between 来替代 in，select 语句指明字段名称，用 union all 替代 union，把...
解决SQL速度慢的方法
zgqtxwd的专栏
04-30 592
<!--google_ad_client = "pub-2947489232296736";/* 728x15, 创建于 08-4-23MSDN */google_ad_slot = "3624277373";google_ad_width = 728;google_ad_height = 15;//--><script type="text/javascript"
转载：QT5(“QOCI“)连接ORACLE执行query查询速度慢的解决方法
menobody的博客
11-15 579
用qt访问oracle数据库时，执行query.next函数速度很慢
hive: 优化配置及bug查询路径
最新发布
皮皮blog
02-07 1797
mapper数量与输入文件的split数息息相关，在Hadoop源码org.apache.hadoop.mapreduce.lib.input.FileInputFormat类中可以看到split划分的具体逻辑。如果想增大mapper数，除了降低mapred.min.split.size之外，也可以调高mapred.map.tasks。参数mapred.min.split.size（默认值1B）和mapred.max.split.size（默认值64MB）分别用来指定split的最小和最大大小。
SQL数据库性能监控与分析：全面指南，优化数据库性能，让你的数据库跑得更快
[SQL数据库性能监控与分析：全面指南，优化数据库性能，让你的数据库跑得更快](https://img-blog.csdnimg.cn/direct/991c255d46d44ed6bb069f9a73fb84a0.png) # 1. SQL数据库性能监控概述** SQL数据库性能监控对于...
Spark SQL优化之路——Hive篇
Christopher_L1n的博客
10-31 4927
Spark SQL针对Hive数据源的优化指南。
Spark入门实战系列--1.Spark及其生态圈简介
yirenboy的专栏
08-05 6621
Spark在2013年6月进入Apache成为孵化项目，8个月后成为Apache顶级项目，速度之快足见过人之处，Spark以其先进的设计理念，迅速成为社区的热门项目，围绕着Spark推出了Spark SQL、Spark Streaming、MLLib和GraphX等组件，也就是BDAS（伯克利数据分析栈），这些组件逐渐形成大数据处理一站式解决平台。
Python查询oracle数据库速度慢
Outsider_Lily的博客
01-05 2525
conn = cx_Oracle.connect('username/password@ip:port/servername') cur = conn.cursor() cur.execute('SELECT * FROM "db"."table"') cur是一个迭代器,不要用fetchall一次性取完數據 直接 for row in cur 即可取数据 使用：sqlalchemy My...
SQL参数化查询速度慢的问题 （Java和 .Net均可能出现这种情况，比如使用 hibernate 的 createSqlQuery 来执行的）
hwjmyz的博客
01-07 1662
SQL参数化查询速度慢的问题 （Java和 .Net均可能出现这种情况，比如使用 hibernate 的 createSqlQuery 来执行的） 有时候，同一个SQL语句在查询分析器中执行很快，但在程序中执行就很慢，究其原因，很多情况是由于参数化查询的预编译造成的。 因为参数化查询时进行了预编译，在第一次执行时即确定了其执行计划，而对于后续查询具体的查询条件而言，其执行计划可能是错误的，所以...
执行session.createSQLQuery(querySql).list()多次后，再次执行没有动静
weixin_30266885的博客
04-07 285
问题： 我的程序是这样的 String querySql="select A.name,B.name " + 　　 " from A inner join B on A.id=B.id " + 　　" where A.s='q' "; Session session = this.getSession(); ...
QT的QSqlQuery与QSqlQueryModel读取数据库问题
MasterCursor的博客
06-15 4704
在使用QT的QSqlQueryModel操作SQLite数据库的时候，遇到了查询只能返回256个结果的问题，经过差不多大半天的时候才找到解决方法。既然说到数据库操作了，就把一些基础性的东西也都贴出来，一方面供初学者参考，另一方面自己也做个备忘。          QT中使用QSqlQuery或者QSqlQueryModelc操作数据库的方法很简单，这里不再赘述，仅贴一个小例子来说明一下。   
SQL查询速度慢的原因分析及解决方案【案例分享】
辰兮要努力
07-12 7802
本篇简单小结一下项目中遇到的SQL慢查询的问题，以及解决方案，欢迎打卡，阅读，学习交流！
pandas连接mysql速度_请问如何可以优化提升pandas的read_sql的速度呢？
weixin_36464343的博客
02-07 2883
小弟的需求需要在多个数据库之间查询数据并关联，所以小弟选择了使用pandas，通过read_sql读取数据至dataframe加工后直接生成目标数据。但是目前遭遇了一个问题：read_sql的速度非常慢，例如，在oracle库中读取37W数据量(22个字段)的表至dataframe耗时需要4分半。代码如下：import pandas as pdimport sqlalchemy as sqlora...
Oracle SQL异常大全：java.sql.SQLException及ORA-错误解析
"这篇博客主要汇总了Oracle数据库在与Java应用程序交互时可能出现的一些常见`java.sql.SQLException`，这些异常通常与SQL操作的错误有关。博客内容涵盖了多个ORA-错误代码，如无效列名、表或视图不存在、无法插入...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值