更多的,需要通过软件层面来进行优化,包括:
SQL调优,如前面所讲,排查出慢查询,有针对性进行优化
表结构优化,根据业务特性,只返回表中合理数据,或表根据业务拆分成多个表,另外,适当的冗余,也能减少join,提升查询性能
读写分离,面向实际业务读多写少的实际情况,使用binlog同步实现一主多从多个数据库实例,提升性能
分库分表,但数据量继续增加时,尤其是单表数据超大,比如超过500
2 业务演进...
就像一个公司是从小到大,业务体量也是如此,一般的,一个业务系统正常演进如下:
单业务系统–单数据库:此时,业务体量很小,数据库承载量充分并有富余
多业务系统–单数据库:这个阶段,业务复杂度增大,会将复杂的业务系统拆分成很多子业务系统,数据库性能卓越,还能继续支持多业务系统
多业务系统–多数据库:即按业务分库、业务量继续增大,数据库成为瓶颈,将数据库按每个业务系统单独划分独立的数据库,独立部署,增加各个系统的业务承载能力,整体业务的承载能力也增强,微服务的处理模式就是这样
分库分表:业务进入持续快速增长,某些业务子系统的单个或多个业务表数据量超限,通过硬件提升、单表的SQL优化、甚至时读写分离,都不能有效提高查询或操作的性能,就需要使用分表处理了;主要有垂直分表和水平分表,垂直分表是按业务特性,单表只存放与业务相关的字段;当数据量达到足够大时,如超过500万条记录,垂直分表性能提升有限,最终还是要使用分库的水平分表
垂直分表:按业务拆分成多个表结构,使表结构更聚焦于业务,减少查询返回数据量
水平分表:表结构相同,基于不同维度划分数据,数据不相同;又分单库分表和多库分表,由于单库始终会有性能瓶颈,所以常见为多库分表
业务演进过程
1 单应用-单DB
小型项目的常见业务形态
2 多应用-单DB
企业具备多种小项目常见的业务形态,数据库服务需要性能相对较好
3 单应用-主从DB
中型复杂业务系统常见的模式,将业务中的读操作、写操作针对不同的DB服务器,提升业务系统容量
主、从DB服务器要有合理的数据同步机制
可以直接业务中切换,也可以使用中间件
4 多应用-多DB
从业务的角度将应用、DB都做切分,切分成粒度更小的多个应用+DB组合
微服务就是典型的多应用-多DB的模式
5 分库分表
当应用体量越来越大,部分业务的单表数据超大,如超过1000万条,此时要考虑分库分表
分库分表给应用带来了很大的复杂性,一般会使用像MyCat、ShardingSphere等中间件来处理,给业务屏蔽DB的复杂性
如何分表?
笔者福利
以下是小编自己针对马上即将到来的金九银十准备的一套“面试宝典”,不管是技术还是HR的问题都有针对性的回答。
有了这个,面试踩雷?不存在的!
回馈粉丝,诚意满满!!!
e5adXqgM-1716224524048)]
[外链图片转存中…(img-hqOGgxHB-1716224524048)]
[外链图片转存中…(img-07ou0ZQr-1716224524048)]