redis-cluster官方集群模式下使用pipeline批量操作

最新推荐文章于 2024-03-18 14:44:42 发布
最新推荐文章于 2024-03-18 14:44:42 发布
阅读量1.8w 收藏 14
点赞数 4
文章标签： redis redis-cluster
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kevin_pso/article/details/53945053
版权


        redis从3.0版本后引入了令人兴奋的cluster集群模式，相信很多人都尝试过了，在高兴之余却发现redis官方的cluster对于java客户端的jedis支持却不是很好，至少目前的版本cluster是不支持直接使用pipeline操作，找了好久，终于找到一些几个在官方cluster模式下支持使用pipeline管道操作的方法。

  1. http://www.bubuko.com/infodetail-1106789.html
  2. https://groups.google.com/forum/#!topic/jedis_redis/Z4-0065UFkg
  3. https://groups.google.com/forum/#!topic/jedis_redis/u6j8slokO3E
开心的小白白白
关注
  • 4
    点赞
  • 踩
  • 14
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
redis集群批量插入
11-23
java连接redis集群批量String类型插入
redis-batch:批量向Redis写入命令
06-09
redis-batch Redis Batch 封装了一个实例，批量写入hincrby、incrby、sadd等命令到Redis。 对于向 Redis 生成大量写入的系统，这可以显着提高 Redis 和发出写入命令的机器的性能。 当我们在 Segment 的服务器集群中部署 redis-batch 时： Redis操作数/秒下降了 4 倍 发出命令的服务器CPU 下降了 50% 天啊。 支持的命令 Redis-batch 仅支持对批处理有意义的“写入”命令。 在 150+ Redis 命令中，redis-batch 只打算支持 34 个，目前支持 12 个。还没有全部支持，请随时 pull request！ 递增 decr, decrby 增量，增量 浮动 欣克尔，欣克尔比 hincrbyfloat 锌比 钥匙 附加 德尔 设置，mset 设置位 改名 德尔
Redis集群使用Jedis的pipeline操作
u011447905的专栏
03-18 381
SpringBoot+Redis集群项目使用Jedis的pipeline执行批量写入操作
redis常见问题和解决方案
hl_java的专栏
05-11 738
持久化、主从问题 (1) Master最好不要做任何持久化工作，如RDB内存快照和AOF日志文件 (a) Master写内存快照，save命令调度rdbSave函数，会阻塞主线程的工作，当快照比较大时对性能影响是非常大的，会间断性暂停服务，所以Master最好不要写内存快照。 (b) Master AOF持久化，如果不重写AOF文件，这个持久化方式对性能的影响是最小的，但是AOF文件会不断增大，AOF文件过大会影响Master重启的恢复速度。Master最好不要做任何持久化工作，包括内存快照和AOF日志
Redis学习(二)：redis集群之cluster模式下的跨节点的批量操作 I
wds的博客
05-19 9767
说明 通过之前的博文《Redis学习(一)：redis集群之哨兵模式下的负载均衡》，对redis哨兵模式下的读负载进行学习研究。在本篇博文中，将对redis cluster模式下的跨节点集合操作进行研究学习。通过本篇博文，我们将了解redis cluster模式的基本原理及在Jedis客户端中如何对redis cluster集群进行集合操作。 正文 Redis Cluster redis clus...
Redis Cluster 集群批量操作
chy980723的博客
05-27 906
//redis集群批量查询(或其他操作) redis-cli -c -p PORT [-a PASSWORD] cluster nodes | awk '{if($3=="master" || $3=="myself,master") print $2}' | awk -F[:@] '{system("redis-cli -c -h "$1" -p "$2" [-a PASSWORD] keys 'KEY_PATTERN' ")}' //redis集群批量删除(或其他操作) redis-cli -c .
一文教你Redis Cluster批量操作的所有姿势(附代码实操)
weixin_45563088的博客
03-18 1582
Redis Cluster 批量操作Key 技巧，用多种方式提供了批量操作的思路，各位可以根据自己的业务量级来选择合适的方法。
在Redis集群模式下使用pipeline进行批量操作
淡定一生2333的博客
02-27 2613
在Redis集群模式下使用pipeline进行批量操作
Redistemplate使用Pipeline操作redis集群
A232222的博客
12-11 3349
管道（pipeline）可以一次性发送多条命令并在执行完后一次性将结果返回，pipeline 通过减少客户端与 redis 的通信次数来实现降低往返延时时间，而且 Pipeline 实现的原理是队列，而队列的原理是时先进先出，这样就保证数据的顺序性。RestTemplate是Spring提供的用于访问Rest服务的客户端。
记一次Redis Cluster Pipeline导致的死锁问题
vivo互联网技术
10-12 849
本文介绍了一次排查Dubbo线程池耗尽问题的过程。通过查看Dubbo线程状态、分析Jedis连接池获取连接的源码、排查死锁条件等方面，最终确认是因为使用了cluster pipeline模式且没有设置超时时间导致死锁问题。
redis cluster下的keys，scan，pipeline使用
getIt的博客
06-30 1300
如果配置为 false，则将所有命令缓存起来，手动调用 flushCommands 的时候，将缓存的命令一起发到服务端，这样其实就是实现了 Pipeline。使用 PIPELINE 之后，我们可以看出，其实它的原理，就是客户端先将所有命令拼接在一起然后本地缓存起来，之后统一发到服务端，服务端执行所有命令之后，统一响应。需要使用回调的连接connection对象进行 Redis 调用，不能直接使用 redisTemplate 调用，否则 pipeline 不生效。redis客户端：lettuce。
redis集群java客户端，支持批量提交
11-04
java客户端不是很好支持redis cluster，spring-date-redis和jedis批量提交还不支持，单个提交都是可以的。 为了批量解决批量提交 网上有几个方案，本示例使用了其中一种，demo里的JedisClusterPipeline类是网上找的，忘记了作者叫什么（里面有注释）。 使用的spring版本是4.3.2以下版本可能不是很好支持，jedis版本是2.8.2， spring-data-redis版本是1.7.2。
在Redis集群中使用pipeline批量插入的实现方法
12-16
由于项目中需要使用批量插入功能, 所以在网上查找到了Redis 批量插入可以使用pipeline来高效的插入, 示例代码如下: String key = "key"; Jedis jedis = new Jedis("xx.xx.xx.xx"); Pipeline p = jedis.pipelined(); List<String> myData = .... //要插入的数据列表 for(String data: myData){ p.hset(key, data); } p.sync(); jedis.close(); 但实际上遇到的问题是,项目上所用到的Redis是集群,初始化
resty-redis-cluster：Redis集群的Openresty lua客户端
02-03
resty-redis-cluster：Redis集群的Openresty lua客户端
docker-redis-cluster:一个 Redis 集群 Docker 镜像
05-29
docker-redis-cluster Redis 集群 Docker 映像。 此图像用于测试环境。 请勿将其用于生产。用法启动集群。 它将启动 6 个 Redis 服务器，监听7000~7005端口和一个主管以确保所有服务器都启动。 在所有服务器启动后，...
redis-cluster-operator:Redis Cluster Operator在Kubernetes上创建和管理Redis集群
05-03
redis-cluster-operator 概述 Redis Cluster Operator在Kubernetes上管理 。 操作员本身是用。 每个主节点及其从节点都由statefulSet管理，为每个statefulSet创建一个无头svc，并为所有节点创建clusterIP服务。 ...
redis-py-cluster:官方redis集群的Python集群客户端。 Redis 3.0+
04-28
redis-py-cluster 该客户端提供了Redis 3.0中添加的Redis集群客户端。 该项目是antirez的redis-rb-cluster的移植版，具有许多附加功能。 原始资源可以在找到 分支master将始终包含已从Pull Requests中合并的最新...
redis-cluster集群搭建
01-20
是否开启保护模式,在开启yes时,当前redis只允许本地登录.外界无法范文,no时建议为了安全考虑,需要指定登录的密码 80行 后台守护进程开启,是的redis服务端启动时不占用控制台,将日志内容输出到配置文件指定的日志...
node-v12.22.1-linux-x64.tar.xz
最新发布
04-29
Node.js，简称Node，是一个开源且跨平台的JavaScript运行时环境，它允许在浏览器外运行JavaScript代码。Node.js于2009年由Ryan Dahl创立，旨在创建高性能的Web服务器和网络应用程序。它基于Google Chrome的V8 JavaScript引擎，可以在Windows、Linux、Unix、Mac OS X等操作系统上运行。 Node.js的特点之一是事件驱动和非阻塞I/O模型，这使得它非常适合处理大量并发连接，从而在构建实时应用程序如在线游戏、聊天应用以及实时通讯服务时表现卓越。此外，Node.js使用了模块化的架构，通过npm（Node package manager，Node包管理器）,社区成员可以共享和复用代码，极大地促进了Node.js生态系统的发展和扩张。 Node.js不仅用于服务器端开发。随着技术的发展，它也被用于构建工具链、开发桌面应用程序、物联网设备等。Node.js能够处理文件系统、操作数据库、处理网络请求等，因此，开发者可以用JavaScript编写全栈应用程序，这一点大大提高了开发效率和便捷性。 在实践中，许多大型企业和组织已经采用Node.js作为其Web应用程序的开发平台，如Netflix、PayPal和Walmart等。它们利用Node.js提高了应用性能，简化了开发流程，并且能更快地响应市场需求。
shell脚本安装redis-cluster
07-20
要安装 Redis Cluster，可以编写一个 Shell 脚本来自动化安装过程。以下是一个示例脚本： ```shell #!/bin/bash # 下载 Redis wget http://download.redis.io/releases/redis-6.2.1.tar.gz tar xzf redis-6.2.1.tar.gz cd redis-6.2.1 # 编译 Redis make # 复制 Redis 可执行文件到 /usr/local/bin sudo cp src/redis-cli src/redis-server /usr/local/bin # 创建 Redis Cluster 目录 sudo mkdir /var/lib/redis-cluster # 配置 Redis Cluster 节点 for port in {7000..7005}; do sudo mkdir -p /var/lib/redis-cluster/$port sudo cp redis.conf /var/lib/redis-cluster/$port/ sudo sed -i "s/port 6379/port $port/" /var/lib/redis-cluster/$port/redis.conf sudo sed -i "s/# cluster-enabled yes/cluster-enabled yes/" /var/lib/redis-cluster/$port/redis.conf sudo sed -i "s/# cluster-config-file nodes-6379.conf/cluster-config-file nodes-$port.conf/" /var/lib/redis-cluster/$port/redis.conf sudo sed -i "s/# cluster-node-timeout 15000/cluster-node-timeout 5000/" /var/lib/redis-cluster/$port/redis.conf done # 启动 Redis Cluster 节点 for port in {7000..7005}; do redis-server /var/lib/redis-cluster/$port/redis.conf --daemonize yes done # 创建 Redis Cluster yes | redis-cli --cluster create 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 --cluster-replicas 1 # 清理安装文件 cd .. rm -rf redis-6.2.1 redis-6.2.1.tar.gz ``` 将以上脚本保存为 `install_redis_cluster.sh`，然后在终端中运行以下命令来执行脚本： ```shell chmod +x install_redis_cluster.sh ./install_redis_cluster.sh ``` 脚本将会下载、编译和配置 Redis，然后启动 Redis Cluster 节点，并创建 Redis Cluster。 请注意，此脚本仅适用于安装 Redis 6.2.1 版本的 Redis Cluster。如需安装其他版本，请根据具体情况进行修改。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值