Redis瑞士军刀HyperLogLog

最新推荐文章于 2020-07-08 22:18:36 发布
最新推荐文章于 2020-07-08 22:18:36 发布
阅读量117 收藏
点赞数
分类专栏： Java Redis 文章标签： Redis HyperLogLog
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35364632/article/details/85103466
版权
Java 同时被 2 个专栏收录
21 篇文章 0 订阅
订阅专栏
Redis
14 篇文章 0 订阅
订阅专栏

HyperLogLog

1、基于HyperLogLog的算法：极小空间完成独立数量统计

2、本质还是字符串

pfadd key element [element ...]                将任意数量的元素添加到指定的HyperLogLog里面，如果内部储存被修改了，返回1，否则返回0

pfcount key [key ...]                          当pfcount作用于单个key时，返回HyperLogLog key的个数，如果key不存在返回0。当pfcount作用于多个key时，返回所有给定HyperLogLog的并集的个数，这个个数是通过将所有给定HyperLogLog合并至一个临时HyperLogLog来计算得出的。

pfmerge destkey sourcekey [sourcekey ...]      将多个HyperLogLog合并为一个HyperLogLog，合并后的HyperLogLog的个数接近于所有输入HyperLogLog的可见集合的并集。合并得出的HyperLogLog会被储存在 destkey键里面，如果该键并不存在，那么命令在执行之前，会先为该键创建一个空的HyperLogLog

 

江南烟雨゛断桥殇╮
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
第3章 瑞士军刀Redis其他功能（HyperLogLog）
zxz9325的博客
08-12 147
Redis瑞士军刀之-HyperLogLog
泷泷养的乔小胖
04-15 163
Redis下一小节：4-7GEO Redis瑞士军刀之-HyperLogLog HyperLogLog： 新的数据结构？ 三个命令 内存消耗 使用经验 1、新的数据结构？ 基于HyperLogLog算法：极小空间完成独立用户数量统计。 HyperLogLog本质还是字符串 127.0.0.1:6379> type users string HyperLogLog用户数...
redis瑞士军刀（多功能介绍）
javazht的博客
07-10 171
Redis命令的生命周期 客户端向Redis服务器发送命令 命令请求在请求队列中排队等待处理 执行命令 返回命令结果 Redis慢查询 慢查询发生在生命周期的第三阶段，是指仅仅执行命令阶段比较慢被称为慢查询。 客户端超时不一定是慢查询，但是慢查询时是客户端超时的一个可能因素。 Redis慢查询相关配置 1. slowlog-max-len ​ 它决定了慢查询日志最多能保存多少条日志，slo...
Redis--瑞士军刀功能
湫兮若风的博客
09-06 181
文章目录1. 慢查询1. 生命周期2. 两个配置3. 配置方法4. 常用查询命令5. 运维经验2. PipeLine(流水线)1. 定义2. 使用jedis操作Pipeline3. `mget & mset`和`Pipeline`的区别4. 使用建议3. 发布订阅1. 架构4. Bitmap(位图)1. 基础知识2. 实战3. 使用经验5. HyperLogLog1. 基础概念2. API...
瑞士军刀Redis
xzzz2020的博客
05-16 271
目录主要功能慢查询生命周期配置pipeline介绍与原生M操作使用建议发布订阅简介相关API消息队列 VS 发布订阅总结：Bitmap（位图）简介相关API举例：独立用户统计总结HyperLogLog三个命令总结GEO简介相关API 主要功能 慢查询 生命周期 如图所示为客户端请求到Redis的完整生命周期：发送命令、排队、执行命令、返回结果 配置 有两点说明： 慢查询发生在第三阶段(也就是说其他阶段像排队耗时都不算) 客户端超时不一定慢查询，因为这四个过程都可能造成超时，但慢查询是客户端超时的一个可
Redis瑞士军刀之-Bitmap
泷泷养的乔小胖
04-15 314
Redis下一小节：4-6 HyperLogLog Redis瑞士军刀之-Bitmap Bitmap： 位图 相关命令 独立用户统计 1、位图 b的ASCII=98 对应的二进制为：01100010 i的ASCII=105 对应的二进制为：01101001 g的ASCII=103 对应的二进制为：01100111 redi-cli操作：获取big 偏移量offset二进制对应...
Redis-瑞士军刀
刘骐毓的博客
07-08 257
一.慢查询 1.生命周期 2.配置使用 （1）.slowlog-max-len (2).sslowlog-log-slower-than （3).配置方法 1.默认值 config get slowlog-max-len = 128 config get slowlog-log-slower-than = 10000 2.修改配置文件重启 3.动态配置 config set slowlog-max-len 1000 config set slowlog-log-sl...
Redis学习（三）---瑞士军刀Redis
zhangxiaoxiao9527的博客
03-29 191
一、慢查询 声明周期 慢查询发生在第三阶段（例如keys命令） 客户端超时不一定是慢查询，但慢查询是客户端超时的一个可能因素 （关于慢查询的）两个配置 – slowlog-max-len 先进先出队列（慢查询会进入一个队列） 固定长度 保存在内存中 – slowlog-log-slower-than 慢查询阈值（单位：微妙） slowlog-log-slower-than=0,记录所有命令...
瑞士军刀redis - 慢查询
众人皆醉，唯我独醒
11-09 208
慢查询 pipeline 发布订阅 bitmap hyperloglog GEO 慢查询 生命周期 两个配置 三个命令 运维经验 生命周期： 1：发送命令 2：排队 3：执行命令 4：返回结果 两点说明 1）慢查询发生在第三阶段 2）客户端超时不一定慢查询，但慢查询时客户端超时的一个可能因素 slowlog -max-len 先进先出队列 固定长度 保存在内存里 slowlog-...
Redis启动警告解决
江南烟雨゛断桥殇╮的博客
11-14 4142
[gpp@goldpanpan src]$ 25342:C 14 Nov 11:08:48.118 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo 25342:C 14 Nov 11:08:48.118 # Redis version=4.0.11, bits=64, commit=00000000, modified=0, pid=25342, ...
远程连接Redis报错，(error) DENIED Redis is running in protected mode because protected mode is enabled, no
江南烟雨゛断桥殇╮的博客
11-14 1023
(error) DENIED Redis is running in protected mode because protected mode is enabled, no bind address was specified, no authentication password is requested to clients. In this mode connections are ...
Jedis配置优化
江南烟雨゛断桥殇╮的博客
12-19 672
                                  Commons-pool配置(1) ——资源数控制                                   Commons-pool配置(2) ——借还参数                                                                 适合的MaxTot...
CentOS 6.8下解决Redis make test错误：You need tcl 8.5 or newer in order to run the Redis test
江南烟雨゛断桥殇╮的博客
11-14 668
hadoop@stormspark:~/workspace/redis2.6.13/src$ make test You need tcl 8.5 or newer in order to run the Redis test make: *** [test] Error 1 wget http://downloads.sourceforge.net/tcl/tcl8.6.1-src.tar...
CentOS 安装redis(分布式)
江南烟雨゛断桥殇╮的博客
10-11 290
一、安装实操 Redis下载地址     http://learning.happymmall.com/%E4%BA%8C%E6%9C%9F%E9%9B%86%E7%BE%A4%E5%8F%8A%E7%BC%93%E5%AD%98%E5%88%86%E5%B8%83%E5%BC%8FJava%E7%AB%AF/redis-2.8.0-linux-mac.tar.gz   1、下载Redis...
Redis瑞士军刀BitMap(位图)
江南烟雨゛断桥殇╮的博客
12-19 286
BitMap(位图)   setbit key offset value 对key所储存的字符串值，设置或清除指定偏移量上的位。位的设置或清除取决于value参数，可以是0也可以是1。当key不存在时，自动生成一个新的字符串值。offset 参数必须大于或等于0，小于2^32 gitbit key offset ...
Redis瑞士军刀发布订阅
江南烟雨゛断桥殇╮的博客
12-19 199
发布订阅  角色： 发布者(publisher) 订阅者(subscriber) 频道(channel)   模型  发布订阅：发布一条消息，所有的订阅者都可以收到消息            当然，每一个订阅者是可以订阅多个频道的(如下图)，现在Redis里有两个频道，有的订阅者订阅了一个频道，有的订阅了两个频道。当消息发送的时候，就可以收到不同频道发送的消息。不关注的频...
Jedis基本使用
江南烟雨゛断桥殇╮的博客
12-18 191
简单使用   Jedis两种连接方式 1、Jedis直连(每次使用需要new jedis对象)  2、Jedis连接池(当我们需要对Redis操作时，只需要从Jedis连接池里去借用，不需要时还回来)     方案对比 ...
Redis瑞士军刀慢查询
江南烟雨゛断桥殇╮的博客
12-19 183
慢查询  生命周期： 两点说明： 慢查询发生在第三阶段 客户端超时不一定慢查询，但慢查询是客户端超时的一个可能因素                                                      两个配置-slowlog-max-len  1、先进先出队列（假如说一条命令在执行过程中，被列入慢查询的范围内他就会进入一个队列，这个队列是用Redis的列...
使用redis的HyperLoglog实现日访问量统计
最新发布
03-29
1. 首先需要安装redis，可以参考redis官网的安装教程。 2. 创建一个新的HyperLoglog对象，用于统计每天的访问量。 ```bash PFADD daily_visits:2022-01-01 user1 PFADD daily_visits:2022-01-01 user2 PFADD daily_visits:2022-01-01 user3 ``` 3. 统计每天的访问量，使用PFMERGE命令将每天的HyperLoglog对象合并，最后得到总访问量。 ```bash PFMERGE daily_visits:2022-01-01 daily_visits:2022-01-02 daily_visits:2022-01-03 daily_visits:2022-01-04 daily_visits:2022-01-05 daily_visits:2022-01-06 daily_visits:2022-01-07 > total_visits PFCOUNT total_visits ``` 4. 可以使用脚本自动化统计每天的访问量，将HyperLoglog对象的key设置为日期格式，然后使用CRON定时任务执行脚本。 ```bash #!/bin/bash today=$(date '+%Y-%m-%d') yesterday=$(date -d "yesterday" '+%Y-%m-%d') visits=$(redis-cli PFCOUNT daily_visits:$today) redis-cli PFADD daily_visits:$today user1 user2 user3 redis-cli PFMERGE daily_visits:$today daily_visits:$yesterday > total_visits total=$(redis-cli PFCOUNT total_visits) echo "Today's visits: $visits" echo "Total visits: $total" ``` 以上是使用redis的HyperLoglog实现日访问量统计的简单示例。HyperLoglog可以高效地统计大量数据的基数，但也有一定的误差，误差率约为0.81%。因此，在具体应用中需要根据实际情况评估误差率是否可以接受。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值