Redis数据结构之hyperloglogs
一、什么是hyperloglogs
-
和String一样,也是Redis支持的一种数据类型或者数据结构,用来做基数统计。
-
什么是基数?
比如数据集 {1, 3, 5, 7, 5, 7, 8}, 那么这个数据集的基数集就是 {1, 3, 5 ,7, 8}, 基数(不重复元素的个数)为5。
基数估计就是在误差可接受的范围内,快速计算基数。
-
hyperloglogs的优点是,在输入元素的数量或者体积非常非常大时,计算基数所需的空间总是固定 的、并且是很小的。
在 Redis 里面,每个 HyperLogLog 键只需要花费 12 KB 内存,就可以计算接近 2^64 个不同元素的基 数。这和计算基数时,元素越多耗费内存就越多的集合形成鲜明对比。
-
缺点:因为 HyperLogLog 只会根据输入元素来计算基数,而不会储存输入元素本身,所以 HyperLogLog 不能像集合那样,返回输入的各个元素。
二、相关命令
1. pfadd
- PFADD key element [element …] 将所有元素参数添加到 指定key的hyperloglogs中
127.0.0.1:6379> pfadd user1:views a b c d e
(integer) 1
127.0.0.1:6379> pfadd user2:views d e f g h
(integer) 1
2. pfcount
- [PFCOUNT key [key …] 返回给定 HyperLogLog 的基数估算值。
127.0.0.1:6379> pfadd user1:views a b c d e
(integer) 1
127.0.0.1:6379> pfadd user2:views d e f g h
(integer) 1
127.0.0.1:6379> pfcount user1:views
(integer) 5
127.0.0.1:6379> pfcount user2:views
(integer) 5
127.0.0.1:6379> pfcount user1:views user2:views # 两个key中的不重复元素个数为8
(integer) 8
3. pfmerge
- PFMERGE destkey sourcekey [sourcekey …] 求并集
127.0.0.1:6379> pfmerge user:views user1:views user2:views
OK
127.0.0.1:6379> pfcount user:views
(integer) 8