Redis高级用法--集群

最新推荐文章于 2024-04-26 11:43:07 发布
最新推荐文章于 2024-04-26 11:43:07 发布
阅读量276 收藏
点赞数 1
分类专栏： 笔记 文章标签： java redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jerrywu2/article/details/107456944
版权

1.Redis分片实现

1.1 为什么是使用分片

1）说明:虽然inredsi可以扩展内存空间的大小，但是如果需要存储海量的数据一味的扩大内存，其实效 率也不高
2）分片介绍:准备多态redis，共同为用户提供缓存服务，在保证效率的前提下，实现了内存的扩容

1.2 分片搭建

1.2.1 分片规划

由3台redis构成 端口号分别为6379/6380/6381，如果需要准备多台redis，那就准备多个redis配置文件，注意其中的端口号

1.2.2 准备多台redis

在这里插入图片描述

1.2.3 修改redis端口

说明：修改redis的端口号 vim 6380.conf
在这里插入图片描述

1.2.4 启动多台redis服务

命令:redis-server 6379.conf & redis-server 6380.conf & redis-server 6381.conf &
在这里插入图片描述

1.2.5 spring整合Redis入门案例

public class TestRedisShards {
	//思考:key=shards  存储到了哪台redis中? 如何存储的?
	@Test
	public void test01() {
		//1.准备list集合之后添加节点信息
		List<JedisShardInfo> shards = new ArrayList<JedisShardInfo>();
		shards.add(new JedisShardInfo("192.168.126.131",6379));
		shards.add(new JedisShardInfo("192.168.126.131",6380));
		shards.add(new JedisShardInfo("192.168.126.131",6381));
		
		//2.创建分片对象
		ShardedJedis shardedJedis = new ShardedJedis(shards);
		shardedJedis.set("shards", "准备分片操作");
		System.out.println(shardedJedis.get("shards"));
		
	}
}

1.3 一致性hash算法

一致性hash算法是一种特殊的hash算法，目的是解决分布式缓存的问题。在移除或者添加一个服务器时，能够尽可能小地改变已存在的服务请求与处理请求服务器之间的映射关系。一致性哈希解决了简单哈希算法在分布式哈希表( Distributed Hash Table，DHT) 中存在的动态伸缩等问题

1.3.1 一致性hash原理说明

目的:解决数据如何在分布式环境下进行存储!!!
hash取值区间: 8位16进制数 共有 2^32种可能性!!! (24)8=2^32次方

1).数据如何存储
在这里插入图片描述

2).当节点发生变化带来哪些影响
当节点的数量发生了变化时,则节点中的对应的数据可以动态的迁移.
原则: 当发生了节点变化时,应该尽可能小的影响其他节点.
在这里插入图片描述

1.3.2 一致性hash特性

一致性哈希算法是在哈希算法基础上提出的，在动态变化的分布式环境中，哈希算法应该满足的几个条件:平衡性、单调性和分散性 [4] 。

①平衡性(均衡性)是指hash的结果应该平均分配到各个节点，这样从算法上解决了负载均衡问题 [4] 。 利用虚拟节点实现数据平衡 (平衡数据不能做到绝对平均,只能是相对的)

②单调性是指在新增或者删减节点时，不影响系统正常运行 . 可以实现动态的数据迁移.

③分散性是指数据应该分散地存放在分布式集群中的各个节点(节点自己可以有备份)，不必每个节点都存储所有的数据 [4]

1.4 SpringBoot整合Redis分片

1.4.1 编辑分片properties配置文件

redis.nodes=192.168.126.131:6379,192.168.126.131:6380,192.168.126.131:6381

在这里插入图片描述

1.4.2 编辑RedisConfig配置类整合redis

@Configuration  //表示该类是配置类 一般与@Bean连用
@PropertySource(value = "classpath:/properties/redis.properties")
public class RedisConfig {
	@Value("${redis.nodes}")
	private String redisNodes;  //node,node,node
	
	/**
	 * 整合分片实现redis内存扩容
	 */
	@Bean
	public ShardedJedis shardedJedis() {
		String[] nodes = redisNodes.split(",");//节点数组
		List<JedisShardInfo> shards = new ArrayList<>();
		for (String node : nodes) {//node-> [host:port]
			String host = node.split(":")[0];//host
			int port = Integer.parseInt(node.split(":")[1]);
			shards.add(new JedisShardInfo(host, port));
		}
		//返回分片对象
		return new ShardedJedis(shards);
	} 
	
	/**
	 * 单台redis测试
	 
	@Value("${redis.host}")
	private String host;
	@Value("${redis.port}")
	private Integer port;
	
	@Bean
	public Jedis jedis() {
		return new Jedis(host, port);
	}
	*/
}

1.4.3 修改CacheRedis中的注入–实现redis整合AOP

在这里插入图片描述

1.4.4 关于redis分片总结

1.当redis节点宕机之后,用户访问必然受到影响.
2.当redis服务宕机之后,该节点中的数据可能丢失
3.Redis分片可以实现内存数据的扩容.
4.Redis分片机制中hash运算发生在业务服务器中.redis只负责存取.不负责计算. 所以效率更高.

2 Redis属性说明

2.1 Redis持久化策略

2.1.1 Redis持久化策略说明

说明: Redis的数据都保存在内存中,如果断电或者宕机,则内存数据将擦除,导致数据的丢失.为了防止数据丢失,Redis内部有持久化机制.
当第一次Redis服务启动时,根据配置文件中的持久化要求.进行持久化操作.如果不是第一次启动,则在服务启动时会根据持久化文件的配置,读取指定的持久化文件.实现内存数据的恢复.
2.1.2 RDB模式
特点:
1.rdb模式是redis中默认的持久化策略.
2.rdb模式定期持久化.保存的是Redis中的内存数据快照.持久化文件占用空间较小.
3.rdb模式可能导致内存数据丢失

命令:
前提:需要在redis的客户端中执行.

  1. save 命令 立即持久化 会导致其他操作陷入阻塞.
  2. bgsave 命令 开启后台运行. 以异步的方式进行持久化. 不会造成其他操作的阻塞.

持久化周期:

	save 900 1        900秒内,如果用户执行的1次更新操作,则持久化一次
	save 300 10		  300秒内,如果用户执行的10次更新操作,则持久化一次
	save 60 10000	  60秒内,如果用户执行的10000次更新操作,则持久化一次
	save 1 1	 	  1秒内,如果用户执行的1次更新操作,则持久化一次    set 阻塞!!!!

持久化文件:
在这里插入图片描述

持久化文件路径:
在这里插入图片描述

2.1.3 AOF模式

特点:
1). AOF模式默认条件下是关闭状态. 如果需要开启则需要修改配置文件.
2). AOF模式可以实现数据的实时持久化操作,AOF模式记录的是用户的操作过程.
3). 只要开启了AOF模式,则持久化方式以AOF模式为主.

配置:
开启AOF持久化方式
在这里插入图片描述
持久化文件格式:
在这里插入图片描述
持久化文件名称配置:
在这里插入图片描述
持久化文件策略说明

appendfsync always    只要用户执行一次操作,则持久化一次.
 **appendfsync everysec  每秒持久化一次   默认策略**      效率略低于RDB
appendfsync no        不主动持久化

2.1.4 持久化总结

1.如果用户允许少量的数据丢失,则可以选用RDB模式. 效率更高
2.如果用户不允许数据丢失,则选用AOF模式.
3.可以2种方式都选, 需要搭建组从结构 , 主机选用RDB模式, 从机选用AOF模式,可以保证业务允许.

2.1.5 配置多种持久化方式

1).设计 : 6379 当主机 7380当从机.
2).修改主机的配置文件:
要求: 主机使用RDB模式
在这里插入图片描述
从机使用AOF模式
在这里插入图片描述
3).检查默认模式的状态
命令: info replication
在这里插入图片描述
4).实现主从挂载
编辑从服务器向主机进行挂载
在这里插入图片描述
5).主从测试
1.主机中添加测试数据.
2.检查从机中是否有数据
3.检查持久化文件是否有数据.

总结: 一般条件下主机采用RDB模式,从机采用AOF模式,效率更高.

2.2 Redis内存策略

2.2.1 内存策略说明

如果向redis中添加数据,如果不定期维护内存的大小,则可能会出现内存溢出的问题. 所以通过有效的内存的策略来维护内存的大小.

2.2.2 LRU算法

LRU是Least Recently Used的缩写，即最近最少使用，是一种常用的页面置换算法，选择最近最久未使用的页面予以淘汰。该算法赋予每个页面一个访问字段，用来记录一个页面自上次被访问以来所经历的时间 t，当须淘汰一个页面时，选择现有页面中其 t 值最大的，即最近最少使用的页面予以淘汰。

2.2.3 LFU算法

LFU（least frequently used (LFU) page-replacement algorithm）。即最不经常使用页置换算法，要求在页置换时置换引用计数最小的页，因为经常使用的页应该有一个较大的引用次数。但是有些页在开始时使用次数很多，但以后就不再使用，这类页将会长时间留在内存中，因此可以将引用计数寄存器定时右移一位，形成指数衰减的平均使用次数。

2.2.4 Random算法

随机算法

2.2.5 TTL算法

说明:在设定了超时时间的数据中,将马上超时的数据提前删除.

2.2.6Redis内存策略的配置

 1.volatile-lru -> 在设定超时时间的数据选中lru算法提前删除数据.
 2.allkeys-lru ->  所有的数据都采用lru算法删除.
 3.volatile-lfu -> 设定了超时时间的数据采用lfu算法
 4.allkeys-lfu ->  所有的数据采用lfu
 5.volatile-random -> 设定超时时间的数据采用random算法
 6.allkeys-random -> 所有数据随机 
 7.volatile-ttl ->   将马上要超时的数据提前删除.
 8.noeviction ->     不会删除数据,并且该配置项是默认的配置.如果内存数据存满了将会报错返回.

2.3 Redis集群

2.3.1 集群搭建

2.3.1.1 准备集群文件夹

1.准备集群文件夹
Mkdir cluster
2.在cluster文件夹中分别创建7000-7005文件夹
在这里插入图片描述

2.3.1.2 复制配置文件

说明:
将redis根目录中的redis.conf文件复制到cluster/7000/ 并以原名保存
cp redis.conf cluster/7000/

2.3.1.3 编辑配置文件

  1. 注释本地绑定IP地址
    在这里插入图片描述

  2. 关闭保护模式
    在这里插入图片描述

  3. 修改端口号
    在这里插入图片描述

  4. 启动后台启动
    在这里插入图片描述

  5. 修改pid文件
    在这里插入图片描述

  6. 修改持久化文件路径
    在这里插入图片描述

  7. 设定内存优化策略
    在这里插入图片描述

  8. 关闭AOF模式
    在这里插入图片描述

  9. 开启集群配置
    在这里插入图片描述

  10. 开启集群配置文件
    在这里插入图片描述

  11. 修改集群超时时间
    在这里插入图片描述

2.3.1.4 复制修改后的配置文件

说明:将7000文件夹下的redis.conf文件分别复制到7001-7005中
[root@localhost cluster]# cp 7000/redis.conf 7001/
[root@localhost cluster]# cp 7000/redis.conf 7002/
[root@localhost cluster]# cp 7000/redis.conf 7003/
[root@localhost cluster]# cp 7000/redis.conf 7004/
[root@localhost cluster]# cp 7000/redis.conf 7005/

2.3.1.5 批量修改

说明:分别将7001-7005文件中的7000改为对应的端口号的名称,
在这里插入图片描述

2.3.1.6 通过脚本编辑启动/关闭指令
  1. 创建启动脚本 vim start.sh
    在这里插入图片描述
  2. 编辑关闭的脚本 vim shutdown.sh
    在这里插入图片描述
  3. 启动redis节点
    sh start.sh
  4. 检查redis节点启动是否正常
    在这里插入图片描述
2.3.1.7 创建redis集群
#5.0版本执行
redis-cli --cluster create --cluster-replicas 1 192.168.126.131:7000 192.168.126.131:7001 192.168.126.131:7002 192.168.126.131:7003 192.168.126.131:7004 192.168.126.131:7005

在这里插入图片描述

2.3.2 SpringBoot整合redis集群

入门案例
public class TestCluster {
	
	@Test
	public void TestCluster01() {
		HashSet<HostAndPort> nodes = new HashSet<>();
		nodes.add(new HostAndPort("192.168.126.131", 7000));
		nodes.add(new HostAndPort("192.168.126.131", 7001));
		nodes.add(new HostAndPort("192.168.126.131", 7002));
		nodes.add(new HostAndPort("192.168.126.131", 7003));
		nodes.add(new HostAndPort("192.168.126.131", 7004));
		nodes.add(new HostAndPort("192.168.126.131", 7005));
		
		//利用程序操作redis集群
		JedisCluster jedisCluster = new JedisCluster(nodes);
		jedisCluster.set("abc", "redis集群测试");
		System.out.println(jedisCluster.get("abc"));
	}
}
wk886
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Redis专题】redis集群-cluster nodes命令解析
weixin_41248819的博客
12-31 3140
在redis-cli终端执行cluster nodes命令如下： > cluster nodes fefc8a5afb007617102171cb1731daca38adeb3d 10.188.48.132:32521@42521 master - 0 1640833962176 10 connected 0-5460 dbc6571081e55390bdd8dfdc78d4c489cf16d8e2 10.188.33.189:32507@42507 myself,slave fefc8a5afb
Redis详细使用（含高级）
qq_44002865的博客
06-19 1241
Redis 文章目录Redis1、常用命令Redis五种数据类型公共命令stringhashlistsetzset2、在SpringBoot中使用RedisJedis步骤（五步）Redis步骤（五步）3、订阅功能4、多数据库5、事务6、集群步骤（六步） 1、常用命令 Redis五种数据类型 string、hash、list、set、zset redis中文网站 http://www.redis.cn/ 公共命令 命令 作用 DEL key 删除key DUMP key
Redis高级篇详细讲解
最新发布
weixin_73330164的博客
04-26 1267
Redis主从Redis哨兵Redis分片集群【运维】
redis.conf 配置文件详解——附中文说明
祝我飞黄腾达
04-18 1万+
附上redis.conf 文件详解： # Redis配置文件样例 # 单位注意事项：当需要内存大小时，可以指定，它以通常的形式 1k 5GB 4M 等等： # # 1k => 1000 bytes # 1kb => 1024 bytes # 1m => 1000000 bytes # 1mb => 1024*1024 bytes # 1g => 1000000000 bytes # 1gb => 1024*1024*1024 bytes # # 单位不区分大小写，.
Redis高级特性完整总结
qq_40905284的博客
03-06 196
Redis高级特性总结，redis的一些特殊用法
Redis-x64-5.0.10.rar
05-30
Redis，全称Remote Dictionary Server，是一款开源的、高性能的键值对存储系统，常用于数据库、缓存和消息...了解并掌握Redis的基本概念、使用方法和高级特性，对于开发人员和系统管理员来说都是非常有价值的技能。
redis-as-database-advanced:Redis作为NoSQL数据库的高级用法
04-05
本主题将深入探讨Redis作为数据库的高级用法，结合Spring Boot框架，以及Java客户端的高效应用。 一、Redis的数据类型与高级操作 1. 字符串(Strings)：除了基本的键值存储，Redis字符串支持`INCR`（自增）、`DECR`...
Redis-x64-window.zip
12-12
Redis是一款开源、高性能的键值对存储系统，广泛应用于数据缓存、消息中间件、数据库等领域。本压缩包“Redis-x64-window.zip”显然包含...正确安装、配置并熟练掌握其使用方法，能极大地提升应用程序的性能和可靠性。
php_redis-2.2.4-5.5-ts-vc11-x64
03-14
"php_redis"扩展允许PHP应用程序通过PHP代码与Redis服务器进行交互，执行命令、管理数据、利用Redis的高级功能，如发布/订阅、事务、持久化等。 在压缩包内的文件 "php_igbinary.dll" 是另一个PHP扩展，名为...
redis-in-action:redis实战java版
04-05
书中会探讨这些高级用法，以及如何避免常见的并发问题。 最后，书中还会涉及 Redis 的集群（Cluster）和模块系统，让读者了解如何在大型分布式系统中部署和扩展 Redis，以及如何利用第三方模块如 Redisearch（全文...
Redis高级篇（一）分布式缓存
qq_38618691的博客
05-30 733
redis持久化、主从集群、哨兵、分布集群
node中使用redis
weixin_36094484的博客
08-03 4125
起因是解决jwt失效处理问题。 1.安装： mac系统： brew install redis 安装后，应用程序文件在：/usr/local/bin/目录中（即/usr/local/bin/redis-server），配置文件在：/usr/local/etc/redis.conf linux系统： $ wget http://download.redis.io/releases/r...
redis部署（3台集群）自动安装
都是疯子啊
09-04 2578
注： 在配置时，本文档以【用户：redis/redis】、【目录：/redis】为例进行说明 文档中执行命令为蓝色字体；配置文件为粉色字体；重点标记为红色字体 集群部署 redis集群为主从集群，集群服务器需要三台以上，本文档以三台进行说明 在部署时，每个主节点会自动生成一个从节点，比如192.168.1.1会启动一个主节点，同时会在192.168.1.2启动一个从节点 主节点数据可读写，...
Redis高级特性及应用场景
热门推荐
Tao_cuichen的博客
05-03 3万+
Redis高级特性及应用场景         redis中键的生存时间（expire） redis中可以使用expire命令设置一个键的生存时间，到时间后redis会自动删除它。 过期时间可以设置为秒或者毫秒精度。过期时间分辨率总是 1 毫秒。过期信息被复制和持久化到磁盘，当 Redis 停止时时间仍然在计算 (也就是说 Redis 保存了过期时间)。   expir
Redis 一些高级用法
weixin_34258078的博客
06-25 272
延迟消息队列 利用 expire keyspace notification Redis 过期时，会向特定的消息队列发送消息，监听该消息队列 在 redis.conf 修改 notify-keyspace-events "Ex"，重启 Redis；或者直接利用 config set notify-keyspace-events "Ex" 设置定时任务的 key，key 包含了你在过期那一刻所需要...
redis的使用技巧
zx531112362的博客
06-02 513
最近搭建新服务器,客户方提出需求,保留类似8888,66666等特殊号码作为靓号,而游戏ID的生成跟记录跟redis相关,这里总结一下redis的用法与技巧. 首先简单介绍一下我们的游戏id生成机制,用户发送登录请求到游戏服务器后,游戏服务器会去账号服务器获取游戏id,accsvrd是连接到redis上,当有查询过来时,回去redis服务器查询用户的openid对应的游戏id是否存在,存在则返...
Redis入门到精通-Redis高级命令
底层码农老陈的博客
10-23 1534
六、Redis高级命令 高级命令 ​ keys * : 返回满足的所有键 ,可以模糊匹配 ​ exists ：是否存在指定的key，存在返回1，不存在返回0 ​ exprie：设置某个key的过期时间 ​ ttl：查看剩余时间 ​ persisit：取消过去时间 ​ select : 选择数据库 数据库为0-15（默认一共16个数据库） s ​ 设计成多个数据库实际上是为了数据
Redis高级（一）：redis特点、redis优缺点、redis应用场景
大胡子哥哥
07-21 2850
Redis特点 一：速度快 1、 由c语言编写，更快解析语言代码。 2、 数据都是缓存在内存中，纯内存操作。 3、 采用单线程，避免了不必要的上下文切换和竞争条件，不存在多进程或者多线程导致的切换而消耗 CPU，不用去考虑各种锁的问题，不存在加锁释放锁操作，没有因为可能出现死锁而导致的性能消耗。 4、 数据结构简单，对数据操作也简单。 5、 使用多路I/O复用模型，非阻塞I/O。 二：简单稳定 1、Redis是一个高性能(支持并发11万读8万写)的key-value存储系统。 2、Redis采用的
redis从入门到高级-图文并茂加实操.pdf
10-18
本部分将介绍Redis集群的搭建和使用方法。 通过学习本文，读者可以全面了解Redis的基础知识和高级功能，并能够熟练使用Redis进行数据的存储和操作。无论是初学者还是有一定经验的开发人员，都可以从本文中获得实际...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值