RESP协议

最新推荐文章于 2024-07-17 21:35:47 发布
最新推荐文章于 2024-07-17 21:35:47 发布
阅读量926 收藏 14
点赞数 17
分类专栏： 网络协议 文章标签： redis 网络协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_41117967/article/details/135473018
版权

redis 官方网站 https://redis.io/
redis 官网文档 https://redis.io/docs/
redis 官网 RESP相关 https://redis.io/docs/reference/protocol-spec/
菜鸟教程 https://www.runoob.com/redis/redis-intro.html

redis 简介

redis数据库，REmote DIctionary Server(Redis) 是一个由 Salvatore Sanfilippo 写的 key-value 存储系统，是跨平台的非关系型数据库。Redis 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存、分布式、可选持久性的键值对(Key-Value)存储数据库，并提供多种语言的 API。Redis 通常被称为数据结构服务器，因为值（value）可以是字符串(String)、哈希(Hash)、列表(list)、集合(sets)

有五种基本的数据结构

  1. string（字符串）
  2. hash（散列）
  3. list（链表）
  4. set(集合)
  5. sort set(有序集合)

几种基本数据类型存储方式以及应用场景

  1. 字符串 (String):
  • 存储方式：Redis的字符串是动态字符串，类似于Java中的ArrayList。内部实现为一个结构体，其中包含长度（len）、空间（free）和字节数组（buf）。在字符串长度小于1M时，每次扩容都是加倍现有空间，超过1M后，每次扩容增加1M空间。
  • 应用场景：除了存储普通字符串外，还经常用作各种类型的数值的存储，例如计数器、分布式锁的设置等。
  1. 哈希 (Hash):
  • 存储方式：Hash类型在底层是通过哈希表实现的，当哈希集合中的元素个数和元素大小都比较小时，Redis会使用一种称作ziplist（压缩列表）的紧凑数据结构来存储哈希。当数据量增加之后，Redis会改用更标准的哈希表结构来存储键值对。
  • 应用场景：适用于存储对象，可以用来表示用户的各种属性等。
  1. 链表 (List):
  • 存储方式：List类型在底层主要是通过双向链表实现的，同样会在元素个数较少的情况下使用ziplist作为底层结构，节约内存空间。当列表项的数量或者大小超过预设的阈值时，会改用双向链表。
  • 应用场景：适合用于实现队列和栈，以及在添加或删除元素时保持高性能。
  1. 集合 (Set):
  • 存储方式：Set的底层同样是使用哈希表来实现的，这使得集合中的每个元素都是唯一的且没有顺序。在元素较少的情况下，会使用类似于哈希的ziplist存储结构，以优化内存使用。
  • 应用场景：适合储存不重复的元素集合，例如标签、朋友关系等。
  1. 有序集合 (Sorted Set):
  • 存储方式：有序集合是一种排序的集合，底层实际上是通过跳跃表（skip list）和哈希表共同实现的。跳跃表用于按分数排序和获取排名，而哈希表则用于存储成员到分数的映射。
  • 应用场景：适用于需要按照一定顺序排列元素的场景，如排行榜。

redis 应用场景与底层实现，命令结构不再本文档重点关注范围内，因此不在这里赘述

前后端通讯协议

redis数据库前后端通讯使用RESP （Redis serialization protocol ）协议，是专门为redis设计的一种文本传输协议，在redis 1.2中开始使用该协议，redis2中升级为 RESP2，redis6.0 引入了RESP3，RESP3 是RESP2的超集。

协议简介

RESP 大多数情况下是依托于tcp协议的，虽然从技术角度讲，该协议并不是面向tcp的协议，默认的监听端口是6379。

RESP本质上是一种串行协议，支持很多种消息类型，其每种消息的第一个字段，指示了这种消息的类型。由于他本身是一种文本通讯协议，跟传统的协议不同的是，每种消息的大小，长度，都是不固定的，包括其标识每条消息的长度信息，以及对应的载荷信息，长度都是不固定的，位置在报文中也不固定，唯一能确定消息结构的，只有每条消息的第一个字段。

虽然redis支持多种不同数据类型，但对于用户是完全透明的，因此在RESP协议的设计中，也考虑到了这一点，设计的相对较为简单，其主体思路就是将命令拆分整合，发送给服务端或者客户端，由服务端或者客户端去解析这些报文。

消息类型

数据类型引入版本种类第一个字节
simple strtingRESP2simple+
simple errorsRESP2simple-
integersRESP2simple:
bulk stringRESP2aggregate$
arrayRESP2aggregate*
NullsRESP3simple-
booleansRESP3simple#
DoublesRESP3simple,
Big numberRESP3simple(
Bulk errorsRESP3aggregate!
verbatim stringRESP3aggregate=
MapsRESP3aggregate%
setsRESP3aggregate~
pushesRESP3aggregate>

字段说明

  • simple string
    简单字符串，常用于服务端相应消息，消息结构为 “+” \r\n
    示例：
+OK\r\n

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

  • simple errors
    大多数情况下是服务端发送给客户端的消息（目前没见过客户端发送的err消息不确定会不会有）消息结构为 “-”\r\n
    和简单消息结构相同，只不过前缀字符从 “+” 变成了 “-”
    示例：
-Error message\r\n
-ERR unknown command 'asdf'
-WRONGTYPE Operation against a key holding the wrong kind of value

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

  • Intergers
    十进制 64位整数，在协议中也是以字符串的形式存在的，其基本的数据格式为
:[<+|->]<value>\r\n

样例：

:0\r\n
:100\r\n

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

  • Bulk String
    Bulk String 表示一个二级制字符串，这个字符串长度并没有限制，但是redis规定字符串长度最长是512MB。
    Bulk String 可以在array中出现，也可以单独出现，引导字符为 “$”。
    基本格式为
$<length>\r\n<data>\r\n

样例

$5\r\nhello\r\n
# 空字符
$0\r\n\r\n

在这里插入图片描述

  • Array

这个类型主要是将redis命令以及服务端返回的数据以array成员的形式进行传输，引导字符为 “*”,命令格式为

*<number of elements>\r\n<element1>\r\n<element2>\r\n……<element number>\r\n

样例：

*0\r\n
*2\r\n$5\r\nhello\r\n$5\r\nworld\r\n

在这里插入图片描述

  • NULL
    空数据 不存在任何数值
    首字节用 “_” 引导

resp2中有 空bulk string, 还有空 array，因为是多元参数，导致在实现上有所冗余，在resp3中引入了这个NULL类型，用来解决这个问题

_\r\n
  • Booleans, Doubles, Big Numbers
    这三种类型同样是resp3引入的新类型，用于补充resp2中缺少的数据类型，用法类似于Intergers
// Booleans "#"引导
#<t|f>\r\n
// double ","引导
,[<+|->]<integral>[.<fractional>][<E|e>[sign]<exponent>]\r\n #E 科学计数法
// 正负无穷大，无数据
,inf\r\n
,-inf\r\n
,nan\r\n
// 超大整型
([+|-]<number>\r\n
  • Bulk errors
    这个字段也是对resp2的补充, 前导字符是 “!”, 消息格式
!<length>\r\n<error>\r\n

样例：

!21\r\nSYNTAX invalid syntax\r\n
  • MAPS

RESP3引入的数据类型，跟array类似，使用"%" 引导，"%"字符后跟着一个数字，用以标识该maps中有多少个键值对，比如有一个键值对，则%后数字则为1，基本数据格式为：

%<number-of-entries>\r\n<key-1><value-1>...<key-n><value-n>

样例

%2\r\n
+first\r\n
:1\r\n
+second\r\n
:2\r\n

报文样例：
在这里插入图片描述

  • Sets

这个主要是由服务端返回给客户端的，由 ‘~’ 引导，首先是返回的数值数量，后面跟着的就是内容

报文结构

~<number-of-elements>\r\n<element-1>...<element-n>

样例

在这里插入图片描述

  • Pushes

RESP的推送包含带外数据。它们是协议请求-响应模型的例外，并为连接提供通用的推送模式。
报文结构与 sets 相同, 由 '>'引导

><number-of-elements>\r\n<element-1>...<element-n>

其他说明

  1. RESP协议中simple类型与aggregate类型，应该怎么理解

在Redis Serialization Protocol (RESP) 中，数据类型主要分为两类：简单数据类型（simple data types）和聚合数据类型（aggregate data types）。

  • 简单数据类型（Simple Data Types）
  • 聚合数据类型（Aggregate Data Types）

简单数据类型通常用于传输单个值，而聚合数据类型则用于传输包含多个值的复杂结构，例如列表、集合等。RESP协议通过这些数据类型的设计允许Redis传递丰富的数据结构，同时保持了协议的简洁性和效率。

  1. 对于超长的redis数据，resp是如何处理的

resp协议是基于文本的协议，当一个报文无法承载完整的数据时，剩下的报文就会直接放到下一个报文中，而下一条报文不会重新设置报文数据头，也不会有报文截断标识，每一条数据结束的标识只有\r\n。举例说明：

在这里插入图片描述

在这里插入图片描述

  1. redis 管道命令是如何解决的

每一条resp报文，可以有多条array，对于多条命令管道执行，第一个array为multi 最后一个array则为 exec，中间的array则为需要执行的各种命令，报文示例如下

、在这里插入图片描述

  1. redis 对resp协议的支持
    1. redis数据库由1.2版本引入resp协议，2.0版本引入了resp2，5.0以上的版本则支持了resp3协议
    2. resp3 协议使用客户端需要先向服务端发送hello 3 消息，才能使用resp3协议
望晓天
关注
  • 17
    点赞
  • 踩
  • 14
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
RTSP协议
无为
02-19 991
RTSP（Real Time Stream Protocol，实时流协议）是应用级协议，控制实时数据的发送。RTSP提供了一个可扩展框架，使实时数据，如音频与视频的受控、点播成为可能。数据 源包括现插数据与存储在剪辑中的数据。该协议目的在于控制多个数据发送连接，为选择发送通道如UDP、多播UDP与TCP等提供途径，并为选择基于RTP 上发送机制提供方法。 一．简介 1．目的 实时流协
如何使用RESP连接redis数据库
m0_54803732的博客
02-19 2472
如何使用RESP连接redis数据库--知识从未如此简单
Redis的图形化客户端(RESP)的安装及使用
qq_47701945的博客
12-23 7842
redisDesktopManager redis
【高阶篇】3.1 Redis协议(RESP )详解
日拱一卒无有尽，功不唐捐终入海
09-08 2539
当我们谈论 Redis 时，一般来说，我们讨论的核心是它用来存储和检索数据的多种数据结构：字符串、列表（Lists）、集合（Sets）、有序集合（Sorted Sets）和散列表（Hashes）等。但是，这些操作必须通过一定的协议来执行，这个协议就是Redis协议 (RESP, Redis Serialization Protocol)。RESP 是一个简单而强大的协议，设计得非常易于理解和实现，几乎可以说是目前中间件中最简单的一种协议。这也是 Redis 受到广泛欢迎的一部分原因。
如何手搓一个简易的Redis客户端（RESP协议原理及使用）
weixin_45743893的博客
02-19 695
如何手搓一个简易的Redis客户端（RESP协议原理及使用） 完整代码（已封装成模块包，可直接导入使用） Gitee：https://gitee.com/dpwgc/easy-go-redis Github：https://github.com/dpwgc/easy-go-redis 什么是RESP协议 RESP是一个基于TCP的应用层协议，通过TCP传输数据并根据规则解析数据。Redis服务端与客户端之间就采用RESP通讯。 RESP的优点 简单、易读、二进制安全、解析速度快、可序列化多种类型的数据（
Redis底层协议RESP详解
ljheee的博客
01-07 1544
RESP 文章开始前，先放出两道面试题 1.Redis底层，使用的什么协议? 2.RESP是什么，在Redis怎么体现的? 带着这两个问题，来一探究竟。 什么是 RESP？ 是基于TCP的应用层协议 RESP(REdis Serialization Protocol)； RESP底层采用的是TCP的连接方式，通过tcp进行数据传输，然后根据解析规则解析相应信息, Redis 的客户端和服务端之...
RedisView：RedisView通过自定义的RESP协议解析，自定义的树模型和线程池，实现了开源，跨平台和高性能的Redis接口工具。 RedisView业余爱好通过自写RESP协议解析，自写树模型，线程池实现开源，跨平台，高级Redis界面图形化工具
02-05
它采用自定义的RESP（Redis Simple String, Error, Integer, Bulk String, Array）协议解析器，这是Redis服务器通信的基础协议，允许RedisView高效地与Redis服务器进行数据交换。自定义的协议解析器意味着RedisView...
resp:Redis RESP协议的读取器，写入器和服务器实现
05-25
RESP协议的优点是易于阅读，并且具有二进制协议的性能。 特征 和类型，用于从文件，网络或字节流中流式传输RESP值。 创建自己的RESP服务器。 使用与Redis相同的工具和库。 类型，用于将RESP值持久保存到磁盘。 ...
golang 优先级队列，兼容 redis resp 协议
04-13
khronos golang 优先级队列，兼容 redis resp 协议 package main import ( "fmt" "github.com/eatmoreapple/khronos" ) func main() { khronos.ListenAndServe(":7464") }
RESP3:RESP协议V3存储库。 包含规范以及其他相关资源
05-06
这是RESP协议版本3的存储库。 RESP（REdis序列化协议）是数据库中使用的协议，但是该协议旨在供其他项目使用。 使用协议的第3版（当前尚在设计中），该协议旨在对希望实现简单，高效且具有很大范围的客户端库实现的...
nim-redisparser：Nim的RESP（REdis序列化协议）序列化
02-03
**nim-redisparser：Nim的RESP（REdis序列化协议）解析库** nim-redisparser 是一个专为Nim编程语言设计的库，用于处理 Redis 的 RESP (REdis Serialization Protocol) 协议。RESP 是 Redis 服务器与客户端之间进行...
req和resp的作用及常用方法
m0_51649818的博客
08-11 1万+
文章目录一、作用二、常用方法1、req2、resp 一、作用 req（request）和（response）对象起到了服务器与客户机之间的信息传递作用。 req对象用于接收客户端浏览器提交的数据，从浏览器端取得数据。 resp对象将服务器端的数据发送到客户端浏览器。 二、常用方法 1、req req.setCharacterEncoding() 设置对客户端请求和数据库取值时的编码，只对post请求有效。 // 解决post请求乱码问题 req.setCharacterEncoding("UTF-8
Response的用法
热门推荐
lingxing9454的博客
09-17 4万+
1. 设置响应行的状态码 setStatus(int value) response.setStatus(302); 2.设置响应头 addHeader(String name,String value) addIntHeader(String name,int value) addDateHeader(String name,long value) ...
Redis学习笔记(五)：redis使用的RESP报文格式和手写Redis简易客户端
IT-CRUD
03-15 893
Redis客户端和服务端交互是通过tcp协议，在通讯的报文格式使用的是RESP协议规范，也就是意味只要和Redis服务端建立Scoket连接，通过RESP报文格式传输数据就可以实现Redis客户端和服务端的交互。看起来是很简单的，但是实际上的确是这么简单，RESP报文格式的可读性也是很高的。 RESP协议介绍 RESP协议特点 RESP是Redis通讯的协议规范，有以下几种特点： 简单的实现，人工也就可以写的出来 快速的被计算机解析 简单的可以被人工解析 基于网络层，Redis在tcp端口6379（默认）
windows+Reids可视化工具RESP.app的安装以及使用
weixin_42288432的博客
11-14 1万+
Redis以及可视化工具安装和使用
一文搞懂 Redis 通讯协议 RESP(转载)
xupeng1644的博客
07-05 1239
众所周知，是基于客户端-服务端模式工作的，客户端发送命令给服务端，服务端执行命令，然后将命令执行结果返回给客户端。为了满足高性能的要求，特地设计了（全称）协议，用来作为客户端与服务端的通讯协议，协议有以下优点首先，我们使用执行命令 可以看到，服务端返回了。这是一条再简单不过的命令，接着我们使用同样发送命令给到服务端执行 即是一款网络工具，可以很方便的从套接字中发送/读取数据，这里可以使用与交互是因为底层连接使用的还是协议可以看到，相比，执行命令的返回结果多了个号，这是为什么呢？事实上，才是返回的真正结果，
service方法的学习（req和resp的使用）2020-12-08
mdfdfasd的博客
12-08 2160
service方法的学习（req和resp的使用） Respone对象 作用：用来响应数据到浏览器的一个对象 使用： 设置响应头 setHeader(String name,String value);//在响应头中添加响应信息，但是同键会覆盖 addHeader(String name,String value);//在响应头中添加响应信息，但是不会覆盖。 设置响应状态 sendError(int num,String msg);//自定义响应状态码。 设置响应实体
Redis初识
最新发布
qq_61422622的博客
07-17 920
为了明确分布式系统，我们先来了解单机架构，那么什么是单机架构呢？所谓的单机架构，即只有一台服务器，这个服务器负责所有的工作。如上图一个简单的电商网站的组成，有一个单机服务器完成所有功能，单机服务器主要用有两个服务一个是应用服务（服务端程序），一个是数据库服务（数据存储）。此时一台主机能满足业务需求，这就是单价架构。但是我们一台主机上的硬件资源是有限的，当同一时刻处理的请求多了，就可能会导致某个硬件资源不够用了，从而导致访问时间变长，甚至出错，一般遇到这种场景我们会进行优化：开源节流，软件上的优化。
RESP客户端gitee网址
01-06
- 简单：RESP协议的设计非常简单，易于实现和理解。 - 高效：RESP协议使用二进制格式传输数据，可以减少网络传输的数据量。 - 可扩展：RESP协议支持多种数据类型和命令，可以满足不同的应用需求。 如果您想使用RESP...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

望晓天

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值