redis pipelinning

最新推荐文章于 2024-09-05 22:17:53 发布
最新推荐文章于 2024-09-05 22:17:53 发布
阅读量489 收藏
点赞数
分类专栏： redis 文章标签： redis

Request/Response protocols and RTT

Redis是基于客户端-服务端和请求/响应协议的TCP服务器. 这就意味着一个请求需要通过以下几步来完成.

  • 客户端发送一个查询请求到服务器, 对于服务器的响应, 客户端以阻塞的方式从socket中读取数据
  • 服务器处理从客户端发送过来的命令, 以及返回响应给客户端

因此，例如一个四个命令序列是这样的

  • Client: INCR X
  • Server: 1
  • Client: INCR X
  • Server: 2
  • Client: INCR X
  • Server: 3
  • Client: INCR X
  • Server: 4

客户端和服务器通过网络来进行连接, 因此这个连接可能很快( 本地回环接口 ), 也可能很慢( 主机之间通过网络建立连接).
无论网络怎样, 都会有一个客户端和服务器往返的时间. 这个时间被成为RTT( Round Trip Time ).
这很容易看出当一个客户端需要连续发送多个请求时将会多么影响性能, 如果一个RTT时间是250毫秒( 在通过Internet很慢的链路的情况下 ), 即使服务器能够每秒处理100k的请求, 那么我们也只能够每秒处理最多4个请求. 如果是使用一个loopback接口, 那么RTT时间就会短很多, 但是这个时间还是很多, 如果需要连续处理很多的写操作的话.

幸运的是有一个方法可以改善这个用例.

Redis Pipelining

请求/响应服务器可以被实现, 使得它能够处理新的请求, 即使客户端还没有读取旧的响应. 通过这种方式, 有可能发送多个命令到服务器而不需要去等待回应, 而且在最后只通过一步读取全部的回复.这被称为pipelining, 一种在这几十年都运用广泛的技术.
redis在很早期就已经支持pipelining, 所以无论你使用哪个版本，都可以使用pipelining.
如果使用pipelining, 那么第一个例子中的操作顺序将是下面这样

  • Client: INCR X
  • Client: INCR X
  • Client: INCR X
  • Client: INCR X
  • Server: 1
  • Server: 2
  • Server: 3
  • Server: 4
村夫大胡子
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【SpringBoot】34、SpringBoot整合Redis实现序列化存储Java对象
Asurplus
10-23 21万+
前面我们已经介绍过【SpringBoot】十七、SpringBoot 中整合 Redis，我们可以看出，在 SpringBoot 对 Redis 做了一系列的自动装配，使用还是非常方便的 一、背景 1、思考‘ 通过我们前面的学习，我们已经可以往 Redis 中存入字符串，那么我们要往 Redis 中存入 Java 对象该怎么办呢？ 2、方案 我们可以将 Java 对象转化为 JSON 对象，然后转为 JSON 字符串，存入 Redis，那么我们从 Redis 中取出该数据的时候，我们也只能取出字符串，并转
【SpringBoot】50、SpringBoot为Redis的key统一加上前缀
Asurplus
08-12 21万+
我们在实际的项目应用中，Redis一般都是用来缓存热点数据，一台服务器可能部署了多个应用，应用直接的 Redis 数据需要加上前缀区分开来，我们可以使用序列化的方式，统一为所有的 key 加上前缀 一、关于在 SpringBoot 中整合 Redis https://lizhou.blog.csdn.net/article/details/98358258 二、关于在 SpringBoot 中整合 Redis 实现序列化存储Java对象 https://lizhou.blog.csdn.net/artic
利用 redis pipe 极速地向 redis 内插入海量数据：
zhrq95的博客
02-24 379
1、用 python 脚本创建数据：#!/usr/bin/python for i in range(100000): print 'set name'+str(i),'helloworld'    # python 1.py > redis_commands.txt2、用 shell 脚本将这些命令转化成Redis Protocol：#!/bin/bash while read ...
在Redis集群模式下使用pipeline进行批量操作
淡定一生2333的博客
02-27 3061
在Redis集群模式下使用pipeline进行批量操作
redis的多命令执行方法之一-pipeling
liwenbo_csu的博客
12-18 5859
管道传输(pipelining)：用于一次性处理多条redis命令      redis的执行流程为客户端发送命令到服务端，客服端阻塞等待服务端程序返回，如果中间由于网络通信问题导致速度比较慢，另外由于客户端和服务端的数据传输需要一定的时间。这个      时间叫做RTT，Round Trip Time 。如果有很多条命令要一次性传输，相对来说就会比较慢，redis提供了pipelining命
Redis中PipeLine使用
零度的博客专栏
09-27 6877
(一)简介  Redis客户端与Redis之间使用TCP协议进行连接，一个客户端可以通过一个socket连接发起多个请求命令。每个请求命令发出后client通常会阻塞并等待redis服务处理，redis处理完后请求命令后会将结果通过响应报文返回给client,因此当执行多条命令的时候都需要等待上一条命令执行完毕才能执行，如：get ‘0’,get ‘1’,get ‘2’ 其执行过程
redis集群使用pipeline
weixin_30765577的博客
12-03 1822
前言 redis的pipeline可以一次性发送多个命令去执行，在执行大量命令时，可以减少网络通信次数提高效率。但是很可惜，redis的集群并不支持pipeline语法（只是不提供相应的方法而已）。不过只要稍稍看下jedis的源码，就可以发现虽然没有现成的轮子，但是却很好造。 一、简介 先说下redis集群的简单结构和数据的定位规则（见下图）。redis提供了16384个槽点，并为每个节点分...
Windows 下 Redis 安装与配置 教程
小青龍 的博客
06-14 16万+
Windows下Redis安装与配置教程，Windows下安装Redis的几种方式，msi安装包安装，zip安装包安装。使用SC命令，手动创建Redis服务及注册表服务项，实现Redis服务后台运行及服务自启动。Redis服务配置查看及修改，Redis服务各配置项简要说明。
redis-windows-7.0.11
05-05
Redis是一种开源的内存数据结构存储系统，它支持多种数据结构，如字符串、哈希、列表、集合、有序集合等。Redis可以用作数据库、缓存和消息中间件。Redis在性能、可扩展性和灵活性方面表现出色，因此被广泛应用于Web...
【SpringBoot】36、SpringBoot整合Redis实现发布/订阅
热门推荐
Asurplus
10-23 21万+
一、简介 1、发布订阅 SUBSCRIBE, UNSUBSCRIBE 和 PUBLISH 实现了 发布/订阅消息范例，发送者 (publishers) 不用编程就可以向特定的接受者发送消息 (subscribers). Rather, 发布的消息进入通道，不需要知道有没有订阅者. 订阅者发表感兴趣的一个或多个通道，并且只接受他们感兴趣的消息，不管发布者是不是存在. 发布者和订阅者的解耦可以允许更大的伸缩性和更多动态的网络拓扑。 2、说明 本篇文章是继： 【SpringBoot】三十四、SpringBoot
Redis集群api和集群状态下如何使用pipeline
lihongtai的专栏
12-17 1127
0.准备工作 pom文件 <dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>2.9.0</version&g
Redis集群如何使用pipeline操作
u010627840的专栏
08-12 2044
1. 背景 当我们的产品需要一款分布式缓存组件时,一般会考虑Redis集群. Redis集群是一种分布式的,高可用性的缓存组件, 大多数情况下存储一些经常使用的,变动不频繁的数据,例如用户信息, 离线计算的某类数据等. 但是,随着用户量的大量增 加,如何快速的将海量的数据导入Redis集群变得越加紧急, 传统的逐条插入Redis集群的方式已经无法满足我们的需求, 因为...
携程开源Redis多数据中心解决方案XPipe
博客
04-26 2586
Redis在携程内部得到了广泛的使用，根据客户端数据统计，整个携程全部Redis的读写请求在每秒200W，其中写请求约每秒10W，很多业务甚至会将Redis当成内存数据库使用。这样，就对Redis多数据中心提出了很大的需求，一是为了提升可用性，解决数据中心DR（Disaster Recovery）问题；二是提升访问性能，每个数据中心可以读取当前数据中心的数据，无需跨机房读数据。在这样的需求下，XP...
redis pipe处理大数据操作
GUI1259802368的博客
02-24 1936
       假设我们现在有一个需求，需要往redis中添加1000完条数据。注意这1000万数据是没有重复的，因此我们只需要把这1000万数据添加到redis中的一个集合中。 命令行添加方式如下： SADD  [集合名称]  成员1，成员2，... 例如 SADD FRUIT apple banana pear       这样添加的效率低，时间都耗费了网络传输和命令传输的往返时间...
Redis中PipeLine使用(一)
Kevin.yang专栏
10-12 9114
(一)简介 Redis客户端与Redis之间使用TCP协议进行连接，一个客户端可以通过一个socket连接发起多个请求命令。每个请求命令发出后client通常会阻塞并等待redis服务处理，redis处理完后请求命令后会将结果通过响应报文返回给client,因此当执行多条命令的时候都需要等待上一条命令执行完毕才能执行，如：get ‘0’,get ‘1’,get ‘2’ 其执行过程
Redis 常用命令总结
weixin_73869209的博客
09-05 549
以上就是这篇博客的主要内容了,大家多多理解,下一篇博客见!
tp5中怎么用redis
叶落无痕的博客
09-05 602
通过配置和调用相关方法，可以方便地在TP5中使用Redis进行缓存和Session管理，提高系统的效率和性能。TP5是一款基于PHP开发的高性能框架，它可以与Redis一起使用，来提高应用程序的性能和扩展能力。注意：在以上代码中，'channel'是发布和订阅的频道名称，'key'是Redis键的名称，'lock_key'是锁的名称。注意：在以上代码中，'redis'是在配置文件中配置的Redis连接名称。注意：在以上代码中，'redis'是在配置文件中配置的Redis连接名称。
基于 Redis 的分布式锁实现原理及步骤
最新发布
weixin_62371118的博客
09-05 668
实现分布式锁的目的是在分布式系统中，保证多个节点之间对共享资源的并发访问是互斥的。常用的分布式锁实现方式有以下几种：基于数据库、基于 Redis、基于 Zookeeper。下面详细介绍基于 Redis 的分布式锁实现原理及步骤。
redisson RMap和RMapCache的区别
weixin_43833540的博客
09-02 294
RMapCache：基于Redis的zset（有序集合）实现自动过期缓存，这可能在某些情况下导致性能低于RMap，特别是在处理大量数据时。通过设置过期时间，可以自动清理过期的数据，减少手动管理的复杂性。RMapCache：是一个带有缓存自动过期功能的Map实现，它结合了RMap的映射功能和缓存过期的特性。开发人员需要自行管理数据的过期和清理。RMap：基于Redis的Hash结构，因此在大数据量和高并发的情况下，性能相对较高。RMap：是一个分布式的映射结构，类似于Java中的Map接口，用于存储键值对。
Redis 6.2.4 安装教程
3. **配置文件备份与修改**：Redis的默认配置文件是`redis.conf`，可以使用`cp`命令备份原有配置，如`cp /usr/local/redis/redis-6.2.4/redis.conf /usr/local/redis/redis-6.2.4/redis.bak.conf`。接着，编辑配置...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值