redis-安装布隆过滤器插件及PHP调用

最新推荐文章于 2024-10-07 10:23:33 发布

raoxiaoya

最新推荐文章于 2024-10-07 10:23:33 发布

阅读量2.8k

点赞数

分类专栏： PHP # Redis

本文链接：https://blog.csdn.net/raoxiaoya/article/details/101018840

版权

PHP 同时被 2 个专栏收录

240 篇文章 5 订阅

订阅专栏

Redis

25 篇文章 1 订阅

订阅专栏

redis >= 4.0
手册：https://oss.redislabs.com/redisbloom/

一、Linux下安装redis的BloomFilter插件

cd /usr/local
wget https://github.com/RedisBloom/RedisBloom/archive/v1.1.1.tar.gz
tar -zxf v1.1.1.tar.gz
cd RedisBloom-1.1.1
make
ls
pwd

给redis添加扩展

vi /usr/local/redis-4.0.14/redis.conf
	##################### MODULES #################### 
	 
	loadmodule /usr/local/RedisBloom-1.1.1/rebloom.so INITIAL_SIZE 10000000 ERROR_RATE 0.0001

后台启动
./src/redis-server redis.conf

或者
./src/redis-server redis.conf --loadmodule /usr/local/RedisBloom-1.1.1/rebloom.so INITIAL_SIZE 10000000 ERROR_RATE 0.0001

netstat -lntp

命令：
新建过滤器：

BF.RESERVE {key} {error_rate} {size}
bf.reserve books 0.001 10000

error_rate指容错率，取值范围为(0,1)，数值越小，占用内存越大，操作时占用cpu资源越大。
Size指过滤器的容量，添加的条目数超过此数字后，性能将开始下降。实际降级将取决于超出限制的程度。随着条目数呈指数增长，性能将呈线性下降。
如果不通过该命令来新建过滤器，bf.add添加值时会自动创建过滤器，但会使用默认的容量与容错率。

添加过滤器与值：

BF.ADD {newFilter} {foo}

如果过滤器不存在，则会自动创建，使用默认的容量100与容错率0.01。遵循集合的特性，已存在的则添加失败。
批量添加

bf.madd users user4 user5 user6 user7

检查过滤器中是否存在值：

BF.EXISTS {newFilter} {foo}

批量检查

bf.mexists users user4 user5 user6 user7 user8

过滤器创建后容量和容错率就无法改变了。
过滤器中的元素没法删掉。

客户端

./src/redis-cli -p 6380
127.0.0.1:6380> bf.add users user1
(integer) 1
127.0.0.1:6380> bf.add users user1
(integer) 0
127.0.0.1:6380> BF.EXISTS users user1
(integer) 1
127.0.0.1:6380> BF.EXISTS users user2
(integer) 0

php-redis扩展中有个函数可以调用原始的redis指令：

$redis = new \Redis();
$redis->connect('127.0.0.1', 6380);
$re = $redis->rawCommand('bf.add', 'users', 'user2');
var_dump($re);

添加：在向redis set值的之后，调用bf.add添加到过滤器。
检查：在穿过了redis去到Mysql之前，调用bf.exists检查一下，如果不存在。

布隆过滤器可以用在查询和写入分开的业务模式下，一个业务会把key写入redis和BF，另一个业务来搜索查找这个key。
如果get和set在同一个地方就不能用BF啦。