第九节：MySQL优化设计规范

第九节：MySQL优化设计规范

一、MySQL 大量数据查询慢的主要原因

mysql 数据量过大查询慢的主要原因来源于硬件、软件、以及语言：

1、硬件：硬件能不能支持程序运行，是不是扛不住。

2、软件：mysql是不是没有设计好，数据库设计方面是不是有问题。

3、语言：SQL语句写法。

二、数据库设计

数据库设计可以通过健壮的数据库结构高效并健康的的进行工作。

数据库设计原则：

​ 1、熟悉需求。

​ 2、开发符合规范的数据库。

​ 3、审核数据库设计。

三、数据库优化

一、数据库规范:

1、命名规范：

1、表名的单数和复数形式要统一。

2、对于字段，如果主键是数字类型的，可以考虑使以_N结尾，例如USERID_N；如果是字符类型C结尾userName_C。

3、如果一个单词经常出现，比如user，则可以考虑以_U结尾，例如，USERID可以表示成ID_U，USERNAME表示为NAME_U。

4、如果某一列是日期类型，则使用D_开头，起到强调的作用，例如：D_CREATEDATETIME。

2、明确现实中实体与数据表的关系。

3、一张数据表不能既没有主键也没有外键。

4、表要符合基本表的特征。

5、必须满足第一第二范式，尽量满足第三范式。

第一范式：是对属性的原子性约束，要求属性具有原子性，不可再分。

第二范式:  记录的唯一性约束，要求记录有唯一标识，即实体的唯一性。

第三范式：对字段冗余的约束，即任何字段不能由其他字段派生出来，要求字段没有冗余，一个表中的字段除了和主键有关外，这些字段他们之间不能有关系，也就是说这个表中的字段只能和主键相关，他们之间没有关系.

6、比较简洁的E-R图。

7、符合完整性约束。

二、基本表特征：

1、原子性，就是基本表中的字段是不可在分解的。

2、原始性，基本表中的记录是袁术数据的记录。

3、演绎性，由基本表和关系表中的数据可以派生出任何想要的数据。

4、稳定性、基本表中的结构是相对稳定的，表中的记录需要长期保存。

三、数据库设计技巧：

1、在符合系统需求的前提下，表的个数越少越好，一张表中组合主键字段数越少越好，一个表中的字段越少越好。

2、检查各种变化字段。

3、避免使用保留字。

4、数据库设计的时候多使用删除标记字段。

5、避免使用触发器。

6、如果发现在重复输入数据，就需要创建新的表和新的关系。

7、熟练使用数据库设计工具。

8、创建E-R图和数据字典。

9、每个表都应该有三个有用的字段：修改记录时间、修改人、修改后的版本。

10、对于地址和电话采用多个字段。

四、SQL优化

1.对查询进⾏优化，应尽量避免全表扫描，⾸先应考虑在 where 及 order by 涉及的列上建⽴索引。

2.应尽量避免在 where ⼦句中对字段进⾏ null 值判断，否则将导致引擎放弃使⽤索引⽽进⾏全表扫描

如：select id from t where num isnull可以在num上设置默认值0，确保表中num列没有null值，然后这样查询：select id from t where num=0

3.应尽量避免在 where ⼦句中使⽤!=或<>操作符，否则引擎将放弃使⽤索引⽽进⾏全表扫描。

4.应尽量避免在 where ⼦句中使⽤or 来连接条件，否则将导致引擎放弃使⽤索引⽽进⾏全表扫描

如：select id from t where num=10 or num=20可以这样查询：select id from t where num=10 union all select id from t where num=20

5.in 和 not in 也要慎⽤，否则会导致全表扫描，

如：select id from t where num in(1,2,3) 对于连续的数值，能⽤ between 就不要⽤ in了：select id from t where num between 1 and 3

6.下⾯的查询也将导致全表扫描：

select id from t where name like '李%'若要提⾼效率，可以考虑全⽂检索。

7.如果在 where⼦句中使⽤参数，也会导致全表扫描。因为SQL只有在运⾏时才会解析局部变量，但优化程序不能将访问计划的选择推迟到运⾏时；它必须在编译时进⾏选择。然⽽，如果在编译时建⽴访问计划，变量的值还是未知的，因⽽⽆法作为索引选择的输⼊项。

如下⾯语句将进⾏全表扫描：select id from t where num=@num
可以改为强制查询使⽤索引：select id from t with(index(索引名)) where num=@num

8.应尽量避免在 where ⼦句中对字段进⾏表达式操作，这将导致引擎放弃使⽤索引⽽进⾏全表扫描。

如：select id from t where num/2=100应改为:select id from t where num=100*2

9.应尽量避免在where⼦句中对字段进⾏函数操作，这将导致引擎放弃使⽤索引⽽进⾏全表扫描。

如：select id from t wheresubstring(name,1,3)='abc' ，name以abc开头的id应改为:select id from t where name like 'abc%'

10.不要在 where ⼦句中的“=”左边进⾏函数、算术运算或其他表达式运算，否则系统将可能⽆法正确使⽤索引。

11.在使⽤索引字段作为条件时，如果该索引是复合索引，那么必须使⽤到该索引中的第⼀个字段作为条件时才能保证系统使⽤该索引，否则该索引将不会被使⽤，并且应尽可能的让字段顺序与索引顺序相⼀致。

12.不要写⼀些没有意义的查询，如需要⽣成⼀个空表结构：

select col1,col2 into #t from t where 1=0
这类代码不会返回任何结果集，但是会消耗系统资源的，应改成这样：
create table #t(...)

13.很多时候⽤ exists 代替 in 是⼀个好的选择：

select num from a where num in(select num from b)
⽤下⾯的语句替换：
select num from a where exists(select 1 from b where num=a.num)

14.并不是所有索引对查询都有效，SQL是根据表中数据来进⾏查询优化的，当索引列有⼤量数据重复时，SQL查询可能不会去利⽤索引，如⼀表中有字段sex，male、female⼏乎各⼀半，那么即使在sex上建了索引也对查询效率起不了作⽤。

15.索引并不是越多越好，索引固然可 以提⾼相应的 select 的效率，但同时也降低了 insert 及 update 的效率，因为 insert或 update时有可能会重建索引，所以怎样建索引需要慎重考虑，视具体情况⽽定。⼀个表的索引数最好不要超过6个，若太多则应考虑⼀些不常使⽤到的列上建的索引是否有必要。

16.应尽可能的避免更新 clustered 索引数据列，因为 clustered索引数据列的顺序就是表记录的物理存储顺序，⼀旦该列值改变将导致整个表记录的顺序的调整，会耗费相当⼤的资源。若应⽤系统需要频繁更新clustered 索引数据列，那么需要考虑是否应将该索引建为clustered 索引。

17.尽量使⽤数字型字段，若只含数值信息的字段尽量不要设计为字符型，这会降低查询和连接的性能，并会增加存储开销。这是因为引擎在处理查询和连接时会逐个⽐较字符串中每⼀个字符，⽽对于数字型⽽⾔只需要⽐较⼀次就够了。

18.尽可能的使⽤ varchar/nvarchar 代替 char/nchar ，因为⾸先变长字段存储空间⼩，可以节省存储空间，其次对于查询来说，在⼀个相对较⼩的字段内搜索效率显然要⾼些。

19.任何地⽅都不要使⽤ select * from t ，⽤具体的字段列表代替“*”，不要返回⽤不到的任何字段。

20.尽量使⽤表变量来代替临时表。如果表变量包含⼤量数据，请注意索引⾮常有限（只有主键索引）。

21.避免频繁创建和删除临时表，以减少系统表资源的消耗。

22.临时表并不是不可使⽤，适当地使⽤它们可以使某些例程更有效，例如，当需要重复引⽤⼤型表或常⽤表中的某个数据集时。但是，对于⼀次性事件，最好使⽤导出表。

23.在新建临时表时，如果⼀次性插⼊数据量很⼤，那么可以使⽤ select into 代替 create table，避免造成⼤量 log ，以提⾼速度；如果数据量不⼤，为了缓和系统表的资源，应先create table，然后insert。

24.如果使⽤到了临时表，在存储过程的最后务必将所有的临时表显式删除，先 truncate table ，然后 drop table ，这样可以避免系统表的较长时间锁定。

25.尽量避免使⽤游标，因为游标的效率较差，如果游标操作的数据超过1万⾏，那么就应该考虑改写。

26.使⽤基于游标的⽅法或临时表⽅法之前，应先寻找基于集的解决⽅案来解决问题，基于集的⽅法通常更有效。

27.与临时表⼀样，游标并不是不可使 ⽤。对⼩型数据集使⽤ FAST_FORWARD游标通常要优于其他逐⾏处理⽅法，尤其是在必须引⽤⼏个表才能获得所需的数据时。在结果集中包括“合计”的例程通常要⽐使⽤游标执⾏的速度快。如果开发时间允许，基于游标的⽅法和基于集的⽅法都可以尝试⼀下，看哪⼀种⽅法的效果更好。

28.在所有的存储过程和触发器的开始处设置 SET NOCOUNT ON ，在结束时设置 SET NOCOUNT OFF 。⽆需在执⾏存储过程和触发器的每个语句后向客户端发送DONE_IN_PROC 消息。

29.尽量避免⼤事务操作，提⾼系统并发能⼒。

30.尽量避免向客户端返回⼤数据量，若数据量过⼤，应该考虑相应需求是否合理。