matlab 字符串如何存储为ascii_Redis字符串(string)是如何存储的？

以下涉及到的源码均来自 https://github.com/redis/redis (branch 6.2)

背景知识

在6.2这个版本redis支持的数据结构如下

可能大家比较熟悉和用得比较多的是前5种数据结构(后面两种是后来加入的)

redis数据结构编码类型

其中字符串涉及到的编码类型有

OBJ_ENCODING_RAW(原生)

OBJ_ENCODING_INT(整型)

OBJ_ENCODING_EMBSTR(紧凑型, 前提条件字符串长度小于等于44，后面再分析这个数字是如何来的)

这些数据结构在redis内部表示

从redisObject可以算出该结构体占用内存大小

4bit + 4bit + 24bit + 4Byte + 4Byte = 12Byte

即是 sizeof(struct redisObject) = 12 (后面有用到)

Redis字符串(string)内部数据结构Sds

从上面看起来sds和普通字符串没啥区别, 其实redis为了节省内存做了更细的划分

除了sdshdr5的结构不太一样，其它结构都一样(适用于不同长度的字符串)

len -> 已使用的长度

alloc -> 分配的长度(除去了sds头和空'0'结束符 - 可以更方便的计算可用长度 avail = alloc - len)

flags -> 低三位表示sds类型, 高五位目前还未使用到

buf[] -> 实际字符串数据

sds header里存有len长度的一个解释:

You can print the string with printf() as there is an implicit 0 at the end of the string. However the string is binary safe and can contain 0 characters in the middle, as the length is stored in the sds header.

来看看sds的创建过程就能大概明白了

sds创建

1. 如何确定新建的sds类型

2. 计算sds header大小

3. 分配内存

4. 内存初始化

5. sds结构设置

从上面sds创建过程可以大概地了解到sds在内存的存储形式

连续的内存, 可依次分为sds header + sds buf(字符串数据) + '0'(终止符)

redis的字符串结构体redisObject的ptr指向就是sds结构

接着来看看struct redisObject(也就是robj)在内存的存储形式，了解完后就能对一个字符串是如何在redis中存储的就会比较清晰了

redisObject(robj)内存存储形式

再来回顾下这个结构

简单看看robj的创建过程

Redis是如何确定字符串的编码类型(robj->encoding)的？

首先从string的set command入手看看

OBJ_ENCODING_INT编码类型

OBJ_ENCODING_EMBSTR

字符串对象(StringObject)创建过程

1. OBJ_ENCODING_EMBSTR_SIZE_LIMIT是如何计算出来的

看看redis的注释

The current limit of 44 is chosen so that the biggest string object

we allocate as EMBSTR will still fit into the 64 byte arena of jemalloc.

redis使用的内存分配库的申请内存快单位是64byte, 由于embstr的整个redisObject是设计成一块连续内存的(提升读写效率), 因此embstr的整个redisObject大小就被限制在64byte, 那再来计算实际字符串的可用内存大小。

开篇就计算了整个struct redisObject大小是12byte

64 - 12 - 7(sizeof(sdshdr8)) - 1(0) = 44byte

2. Embedded String创建

3. Raw String创建

Redis-Cli查看robj type encoding

set abc "1"

type abc -> string

object encoding -> int

set abc "1a"

type abc -> string

object encoding -> embstr

博客相关Github地址

https://github.com/rodbate/blog-code