mysql redis geo_Redis三种特殊数据类型——(BitMap、Geo、HyperLogLog)

最新推荐文章于 2022-06-14 01:10:01 发布
最新推荐文章于 2022-06-14 01:10:01 发布
阅读量113 收藏
点赞数
文章标签： mysql redis geo
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39906499/article/details/113910224
版权
本文介绍了Redis中的Bitmap、Geo和HyperLogLog数据结构及其使用。Bitmap用于存储用户在线状态，通过offset表示用户ID，value为1表示在线，0表示不在线。Geo命令如GEOADD用于在空间索引中添加位置元素，便于存储地理信息。HyperLogLog则是一种节省内存的统计工具，适用于计算不重复项的数量，如注册IP数、在线用户数等。
摘要由CSDN通过智能技术生成

Bitmap

setbit

getbit

bitcount

其中 offset 必须是数字，value 只能是 0 或者 1

这个命令的返回值是修改前的值

对应内存中的值：

09875e330b1c9de5359139093ee8bfce.png

可以看出 bit 的默认值是 0，那么 Bitmap 在实际开发的运用呢？

这里举一个例子：储存用户在线状态

这里只需要一个 key，然后把用户 ID 作为 offset，如果在线就设置为 1，不在线就设置为 0

Geo

geoadd

geopos

geodist

georadius

georadiusbymember

geohash

GEOADD

将给定的空间元素(纬度、经度、名字)添加到指定的键里面

这些数据会以zset的结构被储存在键里面

比如设置

key为Sicily(意大利亚西西里岛屿)

member1为Palermo(意大利西西里自治区首府 巴勒莫)

member2为Catania(意大利西西里大区卡塔尼亚省首府 卡塔尼亚)

GEOPOS

返回经纬度

GEODIST

返回两个位置之间的距离,unit必须为m km mi英里 或 ft英尺

GEORADIUS

以给定的经纬度为中心， 返回键包含的位置元素当中， 与中心的距离不超过给定最大距离的所有位置元素

WITHDIST

在返回位置元素的同时， 将位置元素与中心之间的距离也一并返回

距离的单位和用户给定的范围单位保持一致

WITHCOORD

将位置元素的经度和维度也一并返回

HyperLogLog

这个结构可以非常省内存的去统计各种计数，比如注册 IP 数、每日访问 IP 数、页面实时UV、在线用户数等

但是它也有局限性，就是只能统计数量，而没办法去知道具体的内容是什么

– PFADD

– PFCOUNT

– PFMERGE

PFADD

PFCOUNT

PFMERGE

将多个 HyperLogLog 合并为一个 HyperLogLog

合并后的 HyperLogLog 的基数接近于所有输入 HyperLogLog 的可见集合的并集

合并得出的 HyperLogLog 会被储存在 destkey 键里面

如果该键并不存在，那么命令在执行之前， 会先为该键创建一个空的 HyperLogLog

weixin_39906499
关注
2023年再不会Redis，就要被淘汰了
学Java，找哪吒
03-06 2万+
Redis实战系列，打造精品专栏。
Redis——Redis性能优化与技术选型原理
庄小焱
03-15 762
redis的拥有众多优点，但是的技术有利有弊，所以只有在redis最擅长的场景中才能让redis的作用发挥到最大的作用。同样的redis一样存在很多优化和改进的点。
mysql-hll:用于 MySQL 的 HyperLogLog UDF
06-13
用于 MySQL 的 HyperLogLog UDF 例子 增量积累 CREATE TABLE ` uniqueUsersPerDay `( ` day ` DATE PRIMARY KEY , ` hll ` BLOB); SET @bits = 14 ; -- set storage size to 2^@bits bytes (standard error 0.81%) SET @userId = 1 ; INSERT INTO ` uniqueUsersPerDay ` ( ` day ` , ` hll ` ) VALUES (CURDATE(), HLL_CREATE(@bits, @userId)) ON DUPLICATE KEY UPDATE ` hll ` = HLL_ADD( ` hll ` , @userId) ; SET @userId = 2 ; INS
mysql hyperloglog_Redis HyperLogLog
weixin_39640904的博客
01-30 60
Redis HyperLogLogRedis 在 2.8.9 版本添加了 HyperLogLog 结构。Redis HyperLogLog 是用来做基数统计的算法，HyperLogLog 的优点是，在输入元素的数量或者体积非常非常大时，计算基数所需的空间总是固定 的、并且是很小的。在 Redis 里面，每个 HyperLogLog 键只需要花费 12 KB 内存，就可以计算接近 2^64 个不同元...
mysql hyperloglog_redis数据类型HyperLogLog的使用
weixin_39933895的博客
02-01 260
最近遇到一个业务需求，要统计一张mysql大表每天/每周/每月的记录量(该表每天产生的记录量在好几百万)。当然有朋友会说，select count(1) from xxx不就完事了吗？确实，但是大表做count非常耗时，如果db服务器配置也不咋地，直接就跑跪了。于是想到了redis里的HyperLogLog，这种数据类型一般很少用，但是计算count是它的强项，性能极快(具体原理可参考文末文章)...
Redis三种特殊数据类型：HyperLogLog、BigMap、Geo
言言念念
08-29 1758
redis另三种特殊的数据结构：Geo、HyperLogLog、 BitMap。 3种数据结构介绍与使用、各命令演示。
Redis三大特殊类型介绍：GEO,hyperloglog,bitmap，Redis事务
qdwd888的博客
04-19 359
缺点：有一定的错误率，使用时需要允许有一定的容错性 常用命令： pfadd:增加一个hyperloglog类型的key-value(集合) pfcount:统计一个集合中不重复元素的个数 pfmerge:合并两个或多个集合 127.0.0.1:6379> flushdb # 演示需要，清空当前库 OK 127.0.0.1:6379> pfadd hyper1 a s d f g h j k l a # 创建一个hyperloglog类型，存入元素， (integer) 1 1
2 万字 + 20张图｜ 细说 Redis 九种数据类型和应用场景
虚幻私塾
06-14 452
大家好，我是小林。我们都知道 Redis 提供了丰富的数据类型，常见的有五种：String（字符串），Hash（哈希），List（列表），Set（集合）、Zset（有序集合）。随着 Redis 版本的更新，后面又支持了四种数据类型： BitMap（2.2 版新增）、HyperLogLog（2.8 版新增）、GEO（3.2 版新增）、Stream（5.0 版新增）。每种数据对象都各自的应用场景，你能说出它们各自的应用场景吗？面试过程中，这个问题也很常被问到，又比如会举例一个应用场景来问你，让你说使用哪种 Re
Redis中GEOADD重复添加的问题
孤海岛主
09-14 1865
GEOADD重复添加时如果地理位置名称相同，该命令就会覆盖原有的经纬度的值，相当于是存在就进行修改。但是重复添加时返回的结果是不一样的，当数据不存在时（新增）返回结果为1，当结果存在时（修改）返回结果为0，虽然修改时返回结果为0，但是实际上是修改了的，下面做下演示： 本地:0>zrem Sicily Palermo "1" 本地:0>GEOADD Sicily 13 38 Palermo "1" 本地:0>GEOPOS Sicily Palermo 1) 1) "1..
Redis之HyperLogLog详解与优缺点
李昊轩的博客
04-28 3428
简介: HyperLogLog是一种算法，并非redis独有 目的是做基数统计，故不是集合，不会保存元数据，只记录数量而不是数值。 耗空间极小，支持输入非常体积的数据量 核心是基数估算算法，主要表现为计算时内存的使用和数据合并的处理。最终数值存在一定误差 redis中每个hyperloglog key占用了12K的内存用于标记基数（官方文档） pfadd命令并不会一次性分配12k内存，而是随着基...
使用 Redis 统计在线用户人数
weixin_30530523的博客
01-03 2917
在构建应用的时候， 我们经常需要对用户的一举一动进行记录， 而其中一个比较重要的操作， 就是对在线的用户进行记录。 本文将介绍四种使用 Redis 对在线用户进行记录的方案， 这些方案虽然都可以对在线用户的数量进行统计， 但每个方案都有一些自己特有的操作， 并且各个方案的性能特征以及资源消耗也各有不同。 方案 1 ：使用有序集合 每当一个用户上线时， 我们就执行 ZADD 命令， 将...
神奇的HyperLogLog算法
weixin_33766805的博客
08-12 519
2019独角兽企业重金招聘Python工程师标准>>> ...
给hyperloglog添加pfexist
qzfzz的博客
04-16 435
最近项目有一个需求就是查看hyperloglog中是否已经对某个元素计数了（不要求非常精确），于是分析了redis的hyperloglog代码后新加了一个新的指令pfexist代码地址如下：https://github.com/qzfzz/redishttps://github.com/qzfzz/phpredis用法127.0.0.1:6379>pfexist hll t1 127.0.0...
Redis基数统计——HyperLogLog小内存大用处
weixin_33857679的博客
10-26 351
2019独角兽企业重金招聘Python工程师标准>>> ...
HyperLogLog介绍
专注互联网后端技术
10-24 462
  Redis HyperLogLog       Redis 在 2.8.9 版本添加了 HyperLogLog 结构。Redis HyperLogLog 是用来做基数统计的算法，HyperLogLog 的优点是，在输入元素的数量或者体积非常非常大时，计算基数所需的空间总是固定 的、并且是很小的。       在 Redis 里面，每个 HyperLogLog 键只需要花费 12 KB...
MySQL性能调优-(六)查询优化
qq_37200262的博客
05-06 635
查询优化 在编写快速的查询之前，需要清楚一点，真正重要的是响应时间，而且要知道在整个SQL语句的执行过程中每个步骤都花费了多长时间，要知道哪些步骤是拖垮执行效率的关键步骤，想要做到这点，必须要知道查询的生命周期，然后进行优化，不同的应用场景有不同的优化方式，不要一概而论，具体情况具体分析。 查询慢的原因 网络 CPU IO 上下文切换 系统调用 生成统计信息 锁等待时间 myisam分为共享读锁和独占写锁，只能锁表;Innodb分为共享锁和排他锁，可以锁表也可以锁行，锁的对象是索引。 优化数据访问 查
Hyperloglog与大数据统计
半日闲的博客
03-16 6320
转自：https://chenjiehua.me/database/hyperloglog-bigdata.html 这几天在做一些数据统计相关的工作，涉及的东西挺多的，在此顺便做一下笔记以备忘。 大数据统计 大数据应用场景中最常见的一个问题便是基数估算，而在进行基数估算时遇到的问题主要是内存需求以及后期数据合并处理等。 举个例子，假设我们的网站对每一次请求都做如下简单的日志记
ServiceStack.Redis API与Redis五种常用数据类型详解
文章着重介绍了Redis中的五种核心数据类型：字符串(string)、链表(list)、哈希(hash)、集合(set)以及有序集合(zset)。每种数据类型的使用方法如下： 1. **字符串(string)**：最基本的数据类型，用于存储文本数据，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值