SQL性能优化-优化执行(更新中)

返回上一级

PBE

prepareStatement,将查询计划保存好,之后便可省去计划生成这一环节,其中保存的计划可以是存在参数的,后续执行时,只需要将参数绑定到计划上。

通常使用在OLTP场景,因为OLTP场景下的SQL,其计划生成环节在整个时间中的比例较大,且计划相对简单单一,因此将这部分提取出来,能获得很好的效果。

另外openGauss内存在全局计划缓存(GlobalPlanCache)的特性,这个特性并不会提升性能,主要是为了节省内存。

关于PBE的更多信息可看这篇 PBE协议

Bypass(OpFusion)

opfusion是openGauss独有的一个特性,可以理解成一个“简易执行器”,由会话级别参数enable_opfusion控制开启关闭,用来高性能的执行简单SQL。

在计划生成完成之后,进入Executor流程执行之前,会先对计划进行检查,若检查通过,则会进行拦截,转而由opfusion进行执行,因此也叫Bypass。
目前bypass仅支持索引扫描,以及几个简单算子的简单排列,通过相关GUC参数可额外支持Agg、Sort、分区表等部分功能,不支持JOIN。此部分可阅读代码 getFusionType() 进行了解。

观察一个SQL是否是走了bypass,可以通过explain,观察计划是否带[bypass]标签,也可通过相关参数了解检查未通过的原因。例如:


一些相关的GUC功能:
opfusion_debug_mode :用于在explain中打印不满足bypass的原因。
enable_beta_fusion :开启后可以额外支持AGG、SORT算子的部分功能。
sql_beta_feature :一些beta特性,设置 PARTITION_OPFUSION 之后,可以额外支持分区表。

并行查询

并行查询即使在一个SQL内,使用多个线程并行完成。

通过参数query_dop控制,1表示单并行,即功能关闭,> 1表示并行度。目前暂无法动态的更改并行度,设置多少就是多少。

并行查询能够将数据分批后并行计算,可以成倍的提升一条sql的性能,当然也并非所有的SQL都可以并行,需要根据算子、计划实际分析看待。

显而易见,其使用的场景主要是复杂查询,对于简单的单点查询,并不会有什么效果。

向量化执行

传统的火山模型执行流程,每次流动的仅有一个元组,而向量化执行则为每次计算一批元组。

向量化执行主要用于对列存场景进行计算,因此其数据结构、计算单元的设计都是面向列存的。
而对于行存表场景以及行列存都存在的场景,目前的方案是实现了一对行列转换算子(VecToRow、RowToVec),将行存数据转换为向量化计算的Batch,进而使用向量化引擎进行计算。

在行存下,通过开启参数force。。。可以强行走向量化执行,但是其查询计划并非是代价递推生成的,而是先生成的行存计划,之后直接对行存计划进行直接改造,因此得到的向量化计划并不一定是比较好的。

向量化的计算会比逐行计算的模式快很多,但行列转换算子却会又带来额外的消耗,且目前消耗比较重。因此向量化执行并不一定能带来性能的提升,需要看这两部分的找补抵耗情况。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
SQL(Structured Query Language)即结构化查询语言,是一种用于管理和操作关系数据库的标准编程语言。在进行SQL优化的过程,除了对SQL语句本身进行优化,抓住SQL的本质也是非常重要的。 SQL的本质是一种描述性语言,它描述了用户对数据库数据的操作需求,而不具体指定如何实现这些操作。因此,在进行SQL优化时,我们需要理解和把握用户的需求,从而更好地设计和优化数据库结构,提高数据库性能和查询效率。 首先,我们要深入了解业务需求,从用户的角度出发,了解用户对数据的操作需求,以及对数据查询的频率和规模等方面的需求。通过与用户和业务部门的沟通和交流,我们可以进一步细化并优化SQL语句,满足用户的查询需求。 其次,我们需要优化数据库结构。通过对数据库的分析和设计,我们可以将常用的查询操作转化为更高效的数据存储和索引方式。例如,通过合理的表设计、表关系的建立和索引的优化,可以减少数据的冗余和重复,提高查询效率。此外,还可以使用分区表、分库分表等技术来提高数据库的并行处理能力。 另外,我们还可以利用缓存技术和查询优化器来提高SQL执行效率。通过设置合适的缓存策略,可以减少对数据库的频繁访问,提高查询性能。查询优化器可以对SQL语句进行优化,选择合适的执行计划和索引,减少查询的时间和成本。 总之,除了针对具体的SQL语句进行优化外,我们还应该抓住SQL的本质,从用户需求和数据库结构的角度出发,进行综合的优化。通过合理设计数据库结构、利用缓存技术和查询优化器等手段,可以提高SQL执行效率,从而满足用户的查询需求。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值