mysql 大字段_0809MySQL实战系列：大字段如何优化|数据存储结构

背景

线上发现一张表，1亿的数据量，物理大小尽然惊人的大，1.2T

最终发现，原来有很多字段，10个varchar，1个text

这么大的表，会给运维带来很大的痛苦：DDL咋办？恢复咋办？备份咋办？

基本知识：InnoDB Storage Architecture for InnoDB On Disk Format

蓝图： database --> tablespaces --> pages --> rows --> columns

InnoDB 物理结构存储结构

InnoDB 逻辑存储结构

InnoDB page 存储结构

页类型

数据页(B-tree Node)

undo页(undo Log Page)

系统页(System Page)

事务数据页(Transaction system Page)

插入缓冲位图页(Insert Buffer Page)

未压缩的二进制大对象页(Uncompressd BLOB Page)

压缩的二进制大对象页(compressd BLOB Page)

页大小

默认16k(若果没有特殊情况，下面介绍的都是默认16k大小为准)

一个页内必须存储2行记录，否则就不是B+tree，而是链表了

结构图

InnoDB row 存储结构

rows 文件格式总体规划图

row-fomat为Compact的结构图

row-fomat为Redundant的结构图

不常用

compress & dynamic 与 Compact 的区别之处

字段之字符串类型

char(N) vs varchar(N)

不管是char，还是varchar，在compact row-format格式下，NULL都不占用任何存储空间

在多字节字符集的情况下，CHAR vs VARCHAR 的实际行存储基本没区别

CHAR不管是否是多字符集，对未能占满长度的字符还是会填充0x20

规范中：对char和varchar可以不做要求

varchar(N) : 255 vs 256

当实际长度大于255的时候，变长字段长度列表需要用两个字节存储，也就意味着每一行数据都会增加1个字节

实测下来存储空间增长并不算大，且性能影响也不大，所以，尽量在256之内吧

varchar(N) & char(N) 的最大限制

char的最大限制是： N<=255

varchar 的最大限制是： N<=65535