一次彻底搞透协议设计(没做过通讯底层也没有关系)!

系统设计,协议先行


大部分人不了解协议的设计细节,更多使用已有协议进行应用层设计,例如:

(1)使用HTTP,设计get/post/cookie参数,以及json包格式;

(2)使用dubbo,而不用去深究内部的二进制包头包体细节;


无论如何,了解协议设计的原则,对深入理解系统通信非常有帮助。


一、协议的分层设计
所谓“协议”,是双方共同遵守的规则,例如:离婚协议,停战协议。协议有语法、语义、时序三要素:
(1)语法,即数据与控制信息的结构或格式;
(2)语义,即需要发出何种控制信息,完成何种动作以及做出何种响应;
(3)时序,即事件实现顺序的详细说明;

画外音:后文主要讲语法设计。


协议设计通常分为三层:应用层协议、安全层协议、传输层协议。
640?wx_fmt=jpeg
下面分别看下这三层的协议应该如何选型。


二、应用层协议设计

应用层协议选型,常见的有三种:文本协议、二进制协议、流式XML协议。


文本协议

文本协议是指“贴近人类书面语言表达”的通讯传输协议,典型的协议是HTTP协议,一个HTTP协议的请求报文样例如下:

GET / HTTP/1.1
User-Agent: curl
Host: musicml.net
Accept: */*


文本协议的特点是:
(1)可读性好,便于调试;
(2)扩展性较好,能通过key:value扩展;
(3)解析效率不高,一行一行读入,按照冒号分割,解析key和value;
(4)对二进制不友好 ,比如语音/视频等;


二进制协议
二进制协议即binary协议,典型是IP协议,以下是IP协议的一个图示:
640?wx_fmt=jpeg
二进制协议一般包含:

(1)定长包头

(2)可扩展变长包体

(3)一般每个字段有固定的含义,以IP协议为例,前4个bit表示协议版本号(Version);


二进制协议的特点是

(1)可读性差,难于调试;

画外音:打日志一般需要一个toString()函数增强可读性。

(2)扩展性不好,如果要扩展字段,旧版协议就不兼容了,所以设计时一般会有一个Version字段;
(3)解析效率超高,几乎没有解析代价,二进制流的每个字段表示固定含义;
(4)天然支持二进制流 ,比如语音/视频;


这是一个典型的16字节二进制定长包头的例子:

//sizeof(cs_header)=16
struct cs_header {
  uint32_t version;
  uint32_t magic_num;
  uint32_t cmd;
  uint32_t len;
  uint8_t data[];
}__attribute__((packed));


其中:

(1)前4个字节表示版本号version;

(2)接下来4个字节表示魔法数字magic_num,用来解决数据错位或丢包问题;

画外音:例如,约定好魔法数字是0x01020304,收到的报文,魔法数字匹配,认为是正常报文,否则认为是报文异常,断开连接。

(3)接下来4个字节表示命令号command,不同的命令号对应不同的变长包体;
(4)最后4个字节表示包体长度length,以确定变长包体有多少字节;


这是一个实际的二进制变长包体:

message CUserLoginReq {
  optional string username = 1;
  optional string passwd = 2;
}


message CUserLoginResp {
  optional uint64 uid =1;
}


它使用的是Google的Protobuf协议,容易看到:

(1)请求报文传入的是用户名与密码;

(2)响应包返回的是用户的uid;

PB是很流行的二进制变长包体协议,其优点为:
(1)通用,可以生成C++、Java、PHP等多语言代码;

(2)自带压缩功能;

(3)对二进制友好;

(4)在工业界已广泛应用;
画外音:Google出品,必属精品。


流式XML协议
流式XML似乎是文本协议的一个特例,亦可以单独作为一类。例如:xmpp就是典型的流式XML协议,下面是xmpp协议的一个典型报文:

<message

to=’romeo@example.net’

from=’juliet@example.com’

type=’chat’

xml : lang=’en’>

<body>Wherefore art thou, Romeo?</body>

</message>


从xml标签中大致可以判断这是一个romeo发给juliet的聊天消息。


XML协议有几个特点:
(1)可读性好,扩展性好,这是XML的特性;
(2)解析代价超高,需要进行dom树分析;

(3)有效数据传输率超低,有大量的标签;

(4)对二进制不友好 ,比如语音/视频等;


三、安全层协议设计

安全层协议设计,除了使用SSL,自行实现的话,常见的又有以下三种方案。

画外音:SSL秘钥管理是个问题。


固定密钥
服务端和客户端约定好一个密钥,同时约定好一个加密算法(例如:AES),每次客户端发送报文前,就用约定好的算法,以及约定好的密钥加密再传输,服务端收到报文后,用约定好的算法,约定好的密钥再解密。

画外音:安全性低,安全性基于程序员的职业操守。


一人一密
简单来说,就是一个人的密钥是固定的,但是每个人之间又不同。常见的实现方式是:

(1)固定加密算法;

(2)加密秘钥使用“用户的某一特殊属性”,比如用户uid、手机号、qq号、用户密码等;


一次一密
即动态密钥,一Session一密钥的安全性更高,每次会话前协商密钥。密钥协商的过程要经过2次非对称密钥的随机生成,1次对称加密密钥的随机生成,具体详情这里不展开。


四、传输层协议设计
可选的协议有TCP和UDP,
现在基本都是使用TCP,有了epoll等技术后,多连接就不是瓶颈了,单机几十万链接没什么问题。


640?wx_fmt=jpeg

架构师之路-分享可落地的技术文章


相关推荐:

架构师之路18年精选100篇


调研:

贵司的加密,是在代码中写死秘钥么?

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: USB通信底层协议是指USB接口与计算机之间通信所采用的协议。通常情况下,该协议是由硬件设备和驱动程序共同形成的。USB通讯底层协议书籍是为开发人员提供USB协议的详细解释和指导的书籍。 USB协议规定了USB设备与主机之间的通信规则和数据传输方式。通讯底层协议的书籍包括了USB的物理、数据链路、传输、应用等各个方面的内容。它们通常会介绍的内容包括USB接口的电子原理、USB设备的物理和逻辑结构、USB协议的数据包结构、传输速率和通信失误处理等方面。 从软件面来看,USB 通讯底层协议要求编写驱动程序并且与硬件设备集成。因此,这类书籍还会涉及USB驱动程序的开发,这包括嵌入式软件和Windows设备驱动程序的编写。由于开发USB应用程序的难度较高,因此这些书籍还提供了详细的示例代码和开发工具介绍,让读者能够更好地理解USB通讯底层知识和应用。 总之,USB通讯底层协议书籍是在USB通讯开发、硬件结构设计和驱动程序编写中必备的参考书籍。它们能够让开发者深入了解USB协议的细节,设计出更加稳定和优秀的USB应用程序。 ### 回答2: USB通讯底层协议是指USB设备和主机之间通信时所遵守的规则和标准。它能够确保设备和主机之间的信息传递是可靠、稳定且高效的。 要学习USB通讯底层协议,可以参考USB规范和USB通讯底层协议相关的书籍。其中,USB规范是USB协议的权威规定,包括USB接口的物理接口、通信协议、电源管理等标准;而USB通讯底层协议相关的书籍,包含了USB通讯协议的实现细节和技术原理。 在具体的学习过程中,需要先了解USB的工作原理和接口类型;然后可以深入学习USB的数据传输和命令传输的协议;同时还需要了解USB设备描述符、端点、传输类型等概念;最后需要熟悉USB设备调试和驱动开发的相关技术。 学习USB通讯底层协议需要具备较高的计算机系统知识和编程经验,同时需要借助硬件和软件工具进行实际操作和实验。针对不同的应用场景,还可以选择一些USB通讯底层协议的案例和实践教程进行学习和掌握。 ### 回答3: USB通讯底层协议书籍的讨论包括了从USB架构到通信协议的所有内容。书中详细介绍了USB通信的十二个功能、枚举过程、速度控制和传输错误的检测和修复等方面的知识。 首先,该书介绍了USB架构的关系,从物理到应用。它解释了每的作用,以及它们如何一起工作来实现USB的通信和控制。 USB的主要任务是使各种设备能够在电脑和其他主机之间进行通信。通过掌握每的功能和特殊要求,从而能够更好地了解USB如何工作。 该书还详细介绍了USB枚举过程。这个过程是在USB设备和主机之间建立起联系的关键步骤。枚举分为一个速度、设备描述符、配置描述符和端点描述符,每个描述符分配以特定的字节顺序和位。 此外,该书也涉及到USB通信过程中速度的控制及数据传输的错误检测和修复方法。它解释了计算传输速度,如何更好地控制它以及如何检测和修复出现的传输错误等问题。 总的来说,这本书提供了大量的实用信息,以帮助开发人员更好地了解USB通信协议。了解这些信息可以帮助开发人员更好地设计和实现USB设备的通信,从而提高设备的性能和可靠性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值