简言
1. 想要统计分析redis中的大key,使用redis的命令 bigkeys 是个比较简洁的办法
2. bigkeys的原理其实很简单,就是分多次遍历整个redis的所有key,计算各个key的大小(一般是元素数)
源代码如下(笔者的redis版本:5.0.1)
// 计算各个类型的方法,可以看到不同的类型用了不同的办法求其长度,并非真正的内存占用
// string : 字符串长度
// list : 列表长度
// set : 元素个数
// hash : 元素个数
// zset : 元素个数
// stream : 元素个数
typeinfo type_string = { "string", "STRLEN", "bytes" };
typeinfo type_list = { "list", "LLEN", "items" };
typeinfo type_set = { "set", "SCARD", "members" };
typeinfo type_hash = { "hash", "HLEN", "fields" };
typeinfo type_zset = { "zset", "ZCARD", "members" };
typeinfo type_stream = { "stream", "XLEN", "entries" };
typeinfo type_other = { "other", NULL, "?" };
// 查找大key的函数
static void findBigKeys(int memkeys, unsigned memkeys_samples) {
unsigned long long sampled = 0, total_keys, totlen=0, *sizes=NULL, it=0;
redisReply *reply, *keys;
unsigned int arrsize=0, i;
dictIterator *di;
dictEntry *de;
typeinfo **types = NULL;
double pct;
dict *types_dict = dictCreate(&typeinfoDictType, NULL);
typeinfo_add(types_dict, "string", &type_string);
typeinfo_add(types_dict, "list", &type_list);
typeinfo_add(types_dict, "set", &type_set);
typeinfo_add(types_dict, "hash", &type_hash);
typeinfo_add(types_dict, "zset", &type_zset);
typeinfo_add(types_dict, "stream", &type_stream);
.......
}