数据库优化方案

最新推荐文章于 2024-09-15 19:04:04 发布

不得不戒

最新推荐文章于 2024-09-15 19:04:04 发布

阅读量1.5k

点赞数

分类专栏：数据库文章标签：数据库优化分库分表

本文链接：https://blog.csdn.net/Sky___Ice/article/details/11889835

版权

数据库专栏收录该内容

11 篇文章 0 订阅

订阅专栏

最近研究了下数据库优化方案，对于分库分表有了些最基本的了解，写下这边文章，以此纪念

一、存储

1、垂直切分

首先将数据库DB中的数据根据业务的关系划分，或者说表之间的关系，垂直划分成3个数据库DB1、DB2、DB3。

比如我们可以将数据库中配置信息、区域划分等划分成一个库，将人员信息、人员持有的卡的信息划分成一个库，然后再将人员的刷卡记录划分成一个库。

2、水平切分

当垂直划分后，对于数据增长缓慢的，可由单一数据库承载，则不需要划分。例如配置信息、区域信息，一旦添加好后，数据量基本不再增加，此时单一数据库就可以承载。

而数据量巨大，且增速迅猛的，则需要进行水平分割，水平分割后可再视数据量的大小，以及预测接下来数据量的增速而将其与其他表水平切分后的数据存入一个数据库，或者单独存入一个数据库。

3、水平切分的实现

（1）、Range分区：通过字段的范围进行分区，该方法适合于按时间周期进行存储的数据，但该方法分区后的数据存储不均匀。

（2）、Hash分区：该方法基于分区字段的Hash值，它可将数据均匀的分布到预先定义的分区中，但对数据的管理比较弱。

附：我们可以规定每张表中存储数据的上限，比如定义一张表中的记录上限为300万条（此处的300万条只是我的猜测，可以找一个最有的记录上限），一旦一张表中的记录达到该上限，那就重新新建一张与该表结构相同但表名略有不同的新表，如原先表为history_201303_1,而新表即为history_201303_2；这样在后面读取数据的时候可以提高读取的效率。

4、垂直、水平切分后表信息的记录

在将数据库进行垂直、水平切分后，原先的数据将被存放于不同的数据库及表中，为了方便数据的读取，我们需要记录下原数据被切分后的数据库地址、数据库名称及表名，该信息可存放在xml文件中。

Xml的格式为：

<record>
	<row>
		<col>原表名</col>
		<col>切分后数据库地址</col>
		<col>切分后数据库名称</col>
		<col>切分后表名</col>
	</row>
<row>
		<col>原表名</col>
		<col>切分后数据库地址</col>
		<col>切分后数据库名称</col>
		<col>切分后表名</col>
	</row>
	………
</record>

原表明：进行数据库优化前，该表的名称

切分后数据库地址：数据库优化后，新生成的表所在的数据库地址

切分后数据库名称：数据库优化后，新生成的表所在的数据库名称

切分后表名：数据库优化后，新生成的表的名称

5、存储过程的使用

在进行数据迁移的过程中，其实是在对同一个sql语句的不停执行，此时使用存储过程能明显提高数据迁移的效率。

二、读取