注:军规主要适用于那些大企业,有着并发量大、数据量大的互联网业务。这类业务架构设计的重点往往是吞吐量,性能优先,对数据库性能影响较大的数据库特性较少使用。这类场景的架构方向是“解放数据库CPU,把复杂逻辑计算放到服务层”,服务层具备更好的扩展性,容易实现“增机器就扩充性能”,数据库擅长存储与索引,勿让数据库背负过重的任务。
必须使用UTF8字符集,新库默认使用utf8mb4字符集。utf8mb4是utf8的超集,emoji表情以及部分不常见汉字在utf8下会表现为乱码,故需要升级至utf8mb4。默认使用这个字符集的原因是:“标准,万国码,无需转码,无乱码风险”,并不“节省空间”。
数据表、数据字段必须加入中文注释
禁止使用外键,如果有外键完整性约束,需要应用程序控制:外键会导致表与表之间耦合,update与delete操作都会涉及相关联的表,十分影响sql 的性能,甚至会造成死锁。高并发情况下容易造成数据库性能,大数据高并发业务场景数据库使用以性能优先
禁止大表使用JOIN查询,禁止大表使用子查询
只允许使用内网域名,而不是ip连接数据库。不只是数据库,缓存(memcache、redis)的连接,服务(service)的连接都必须使用内网域名,机器迁移/平滑升级/运维管理…太多太多的好处,如果朋友你还是采用ip直连的,赶紧升级到内网域名吧。
禁止使用小数存储货币,建议使用整数存储,小数容易获取导致钱对不上
禁止使用负向查询NOT、!=、<>、!<、!>、NOT IN、NOT LIKE等,以及%开头的模糊查询,会导致全表扫描。
一般来说,WHERE过滤条件不会只带这么一个“负向查询条件”,还会有其他过滤条件,举个例子:查询沈剑已完成订单之外的订单(好拗口):
SELECT oid FROM t_order WHERE uid=123 AND status != 1;
订单表5000w数据,但uid=123就会迅速的将数据量过滤到很少的级别(uid建立了索引),此时再接上一个负向的查询条件就无所谓了,扫描的行数本身就会很少。
但如果要查询所有已完成订单之外的订单:
SELECT oid FROM t_order WHERE status != 1;
这就挂了,立马CPU100%,status索引会失效,负向查询导致全表扫描。禁止使用应用程序配置文件内的帐号手工访问线上数据库
禁止非DBA对线上数据库进行写操作,修改线上数据需要提交工单,由DBA执行,提交的SQL语句必须经过测试
分配非DBA以只读帐号,必须通过VPN+跳板机访问授权的从库
开发、测试、线上环境隔离
必须使用InnoDB存储引擎:支持事务、行级锁、并发性能更好、CPU及内存缓存页优化使得资源利用率更高
禁止存储大文件或者大照片:为何要让数据库做它不擅长的事情?大文件和照片存储在文件系统,数据库里存URI多好
线上环境、开发环境、测试环境数据库内网域名遵循命名规范(自己的命名规范)
库名、表名、字段名:小写,下划线风格,不超过32个字符,必须见名知意,禁止拼音英文混用
表名t_xxx,非唯一索引名idx_xxx,唯一索引名uniq_xxx
单实例表数目必须小于500
单表列数目必须小于30(这个数目看业务,不过一般不会太多)
表必须有主键,例如自增主键
必须把字段定义为NOT NULL并且提供默认值
禁止使用TEXT、BLOB类型
必须使用varchar(20)存储手机号
禁止使用ENUM,可使用TINYINT代替:增加新的ENUM值要做DDL操作;ENUM的内部实际存储就是整数,你以为自己定义的是字符串?
单表索引建议控制在5个以内
单索引字段数不允许超过5个
禁止在更新十分频繁、区分度不高的属性上建立索引
建立组合索引,必须把区分度高的字段放在前面:能够更加有效的过滤数据
禁止使用SELECT *,只获取必要的字段,需要显示说明列属性
禁止使用INSERT INTO t_xxx VALUES(xxx),必须显示指定插入的列属性:容易在增加或者删除字段后出现程序BUG
禁止使用属性隐式转换:SELECT uid FROM t_user WHERE phone=13812345678 会导致全表扫描,而不能命中phone索引
禁止在WHERE条件的属性上使用函数或者表达式
应用程序必须捕获SQL异常,并有相应处理
禁止使用OR条件,必须改为IN查询,in的个数建议控制在200以内:旧版本Mysql的OR查询是不能命中索引的,即使能命中索引,为何要让数据库耗费更多的CPU帮助实施查询优化呢?
不在数据库做运算:cpu计算务必移至业务层
控制单表数据量:单表记录控制在1000w
平衡范式与冗余:为提高效率牺牲范式设计,冗余数据
拒绝3B:拒绝大sql,大事物,大批量
字符转化为数字
sql语句尽可能简单:一条sql只能在一个cpu运算;大语句拆小语句,减少锁时间;一条大sql可以堵死整个库
简单的事务:事务时间尽可能短
limit高效分页:limit越大,效率越低
少用连接join
使用load data导数据:load data比insert快约20倍;
打散批量更新