mysql实现字段相加_MySQL在线加字段实现原理

博客已转移到腾讯DBA博客

腾讯互娱内部维护了一个MySQL分支，基于官方5.5.24，实现了类似于Oracle 11g的快速加字段功能，这个分支我们内部称为TMySQL。该功能通过扩展存储格式来实现，原理类似于Oracle 11g，以下介绍下其实现原理。

1. GCS行格式

需要在innodb中实现类似oracle的快速加字段功能，仅仅基于原来的行格式是不行的，必须对其进行扩展。为了保证原MySQL和innodb的兼容性，不改变原存储格式的行为，在线加字段功能是通过新增一种innodb行格式GCS(Game Cloud Storage)来实现，从而避免对其他格式造成影响。

虽然说是新增格式，但该格式与原默认的compact是基本一样的，只是新增了关键的Field Count(字段数)控制信息。

下面先回顾下compact行格式

compact聚集索引记录的格式由下图所示，由记录头和记录内容组成。

记录头记录了解析字段的关键信息，其结构下图所示。

Record Extra Bytes：是固定的5字节，表示记录的额外信息。

Nullable Bitmap：记录可空位图，使用1个bit来表示一个可空字段是否为NULL。

non-NULL Variable-Length Array：非空变长字段数组，表示非空变长字段(如varchar、varbinary)在该行的长度。

关于Compact格式的详细介绍可以参考文章。

compact格式有很重要的两个特点：

字段的定义顺序与存储顺序基本一致(主键除外)

字段为NULL不占存储空间，只需通过Nullable Bitmap记录。

基于以上特点，实现快速加字段功能GCS格式只需在记录头添加Field Count(字段数)，来表示当前记录的字段数，占用1~2字节(若大于127，则使用2字节)。

<