python之OSI协议

1、OSI七层协议

1.1、OSI七层协议的组成

应用层、表示层、会话层、传输层、网络层、数据链路层、物理层

1.2、物理层

负责发送电信号(会把数据链路层发过来的数据转换成电信号)

物理层字面意思解释: 物理传输、硬件、物理特性，计算机与计算机之间的通信，必须要有底层物理层方面的连通，就类似于打电话，中间必须得连电话线
中间的物理链接可以是光缆、电缆、双绞线、无线电波，中间传的是电信号，即010101...这些二进制位

1.3、数据链路层

数据链路层由来: 单纯的电信号0和1没有任何意义，必须规定电信号多少位一组，每组什么意思
数据链路层的功能: 定义了电信号的分组方式

1.3.1、以太网协议

早期的时候，数据链路层就是来对电信号来做分组的。以前每个公司都有自己的分组方式，后来形成了统一的标准，即以太网协议ethernet
ethernet规定: 一组电信号构成一个数据报，叫做'帧'，每一数据帧分成: 报头head和数据data两部分

head包含: (固定18个字节)
	发送者／源地址，6个字节
	接收者／目标地址，6个字节
	数据类型，6个字节
data包含: (最短46字节，最长1500字节)

数据报的具体内容: head长度＋data长度＝最短64字节，最长1518字节，超过最大限制就分片发送
这就像写信，发送者的地址（源地址）就是你家的地址，接收者地址（目标地址）就是对方的收信地址，你家的路由器就相当于邮局，其实在计算机通信中的源地址和目标地址指的是Mac地址

1.3.2、Mac地址

head中包含的源和目标地址由来: ethernet规定接入internet的设备都必须具备网卡，发送端和接收端的地址便是指网卡的地址，即Mac地址

Mac地址: 每块网卡出厂时都被烧制上一个世界唯一的Mac地址，长度为48位2进制，通常由12位16进制数表示（前六位是厂商编号，后六位是流水线号）

1.3.3、 广播地址

计算机底层，只要在一个局域网，都是靠广播的方式，靠吼通信
注意: 基于广播的这种通信就可以实现全世界通信了，你吼一声，如果全世界是一个局域网，全世界的计算机肯定可以听得见，从理论上似乎行得通，如果全世界的计算机都在吼，这是一个灾难。因此，全世界不能是一个局域网，于是就有了网络层

1.4、网络层

网络层功能: 引入一套新的地址用来区分不同的广播域／子网，这套地址即网络地址

网络层的由来: 有了ethernet、Mac地址、广播的发送方式，世界上的计算机就可以彼此通信了，问题是世界范围的互联网是由一个个彼此隔离的小的局域网组成的，那么如果所有的通信都采用以太网的广播方式，那么一台机器发送的包全世界都会收到
对于上述的问题这就不仅仅是效率低的问题了，这会是一种灾难
为了解决上述灾难，网络层定义了一个IP协议
    
结论: 
ip+port+mac => 全世界范围内独一无二的一个基于网络通信的软件
ip+port => 全世界范围内独一无二的一个基于网络通信的软件(ARP协议)

1.4.1、IP协议详解

规定网络地址的协议叫IP协议，它定义的地址称之为IP地址，广泛采用的v4版本即IPv4，它规定网络地址由32位2进制表示
范围0.0.0.0-255.255.255.255
一个IP地址通常写成四段十进制数，例: 172.16.10.1

1.4.1.1、IP地址的两部分

网络部分: 标识子网
主机部分: 标识主机

注意: 单纯的IP地址段只是标识了IP地址的种类，从网络部分或主机部分都无法辨识一个IP所处的子网
例: 172.16.10.1与172.16.10.2并不能确定二者处于同一子网

1.4.2、子网掩码

所谓”子网掩码”，就是表示子网络特征的一个参数。它在形式上等同于IP地址，也是一个32位二进制数字，它的网络部分全部为1，主机部分全部为0。比如，IP地址172.16.10.1，如果已知网络部分是前24位，主机部分是后8位，那么子网络掩码就是11111111.11111111.11111111.00000000，写成十进制就是255.255.255.0

知道”子网掩码”后，我们就能判断，任意两个IP地址是否处在同一个子网络。方法是将两个IP地址与子网掩码分别进行AND运算（两个数位都为1，运算结果为1，否则为0），然后比较结果是否相同，如果是的话，就表明它们在同一个子网络中，否则就不是

比如，已知IP地址172.16.10.1和172.16.10.2的子网掩码都是255.255.255.0，两者与子网掩码分别进行AND运算

172.16.10.1: 10101100.00010000.00001010.000000001
255.255.255.0: 11111111.11111111.11111111.00000000
AND运算得网络地址结果: 10101100.00010000.00001010.000000000->172.16.10.0

172.16.10.2: 10101100.00010000.00001010.000000010
255.255.255.0: 11111111.11111111.11111111.00000000
AND运算得网络地址结果: 10101100.00010000.00001010.000000000->172.16.10.0

结果都是172.16.10.0，因此它们在同一个子网络
总结一下，IP协议的作用主要有两个，一个是为每一台计算机分配IP地址，另一个是确定哪些地址在同一个子网络

1.4.3、IP数据包

IP数据包分为head和data部分，无须为IP包定义单独的栏位，直接放入以太网包的data部分

head：长度为20到60字节
data：最长为65,515字节

注意: 以太网数据包的"数据"部分，最长只有1500字节。因此，如果IP数据包超过了1500字节，它就需要分割成几个以太网数据包，分开发送了
    
有了Mac地址+IP地址，我们就能确定世界上独一无二的一台计算机

1.4.4、ARP协议

arp协议由来: 计算机通信基本靠吼，即广播的方式，所有上层的包到最后都要封装上以太网头，然后通过以太网协议发送，在谈及以太网协议时候，我门了解到：通信是基于Mac的广播方式实现，计算机在发包时，获取自身的Mac是容易的，如何获取目标主机的Mac，就需要通过arp协议

arp协议功能: 广播的方式发送数据包，获取目标主机的Mac地址

协议工作方式: 每台主机IP都是已知的，例如：主机172.16.10.10/24访问172.16.10.11/24

ARP: 把ip解析成mac地址，用来在子网内部通信

1、首先通过IP地址和子网掩码区分出自己所处的子网

2、分析172.16.10.10/24与172.16.10.11/24处于同一网络(如果不是同一网络，那么下表中目标IP为172.16.10.1，通过arp获取的是网关的Mac)

3、这个包会以广播的方式在发送端所处的自网内传输，所有主机接收后拆开包，发现目标IP为自己的，就响应，返回自己的Mac

1.5、传输层

传输层的由来: 网络层的IP帮我们区分子网，以太网层的Mac帮我们找到主机，然后大家使用的都是应用程序，你的电脑上可能同时开启qq，暴风影音等多个应用程序。

那么我们通过IP和Mac找到了一台特定的主机，如何标识这台主机上的应用程序，答案就是端口，端口即应用程序与网卡关联的编号。

传输层功能: 建立端口到端口的通信

补充: 端口范围0-65535，0-1023为系统占用端口

有了Mac地址+IP地址+端口，我们就能确定世界上独一无二的一台计算机上的应用程序

1.5.1、tcp协议

可靠传输，TCP数据包没有长度限制，理论上可以无限长，但是为了保证网络的效率，通常TCP数据包的长度不会超过IP数据包的长度，以确保单个TCP数据包不必再分割

TCP把连接作为最基本的对象，每一条TCP连接都有两个端点，这种端点我们叫作套接字（socket），它的定义为端口号拼接到IP地址即构成了套接字，例如，若IP地址为192.3.4.16 而端口号为80，那么得到的套接字为192.3.4.16:80

1.5.2、tcp报文

1.5.2.1、tcp报文首部

1、源端口和目的端口，各占2个字节，分别写入源端口和目的端口

2、序号，占4个字节，TCP连接中传送的字节流中的每个字节都按顺序编号。例如，一段报文的序号字段值是 301 ，而携带的数据共有100字段，显然下一个报文段（如果还有的话）的数据序号应该从401开始

3、确认号，占4个字节，是期望收到对方下一个报文的第一个数据字节的序号。例如，B收到了A发送过来的报文，其序列号字段是501，而数据长度是200字节，这表明B正确的收到了A发送的到序号700为止的数据。因此，B期望收到A的下一个数据序号是701，于是B在发送给A的确认报文段中把确认号置为701

4、数据偏移，占4位，它指出TCP报文的数据距离TCP报文段的起始处有多远

5、保留，占6位，保留今后使用，但目前应都位0

6、紧急URG，当URG=1，表明紧急指针字段有效。告诉系统此报文段中有紧急数据

7、确认ACK，仅当ACK=1时，确认号字段才有效。TCP规定，在连接建立后所有报文的传输都必须把ACK置1

8、推送PSH，当两个应用进程进行交互式通信时，有时在一端的应用进程希望在键入一个命令后立即就能收到对方的响应，这时候就将PSH=1

9、复位RST，当RST=1，表明TCP连接中出现严重差错，必须释放连接，然后再重新建立连接

10、同步SYN，在连接建立时用来同步序号。当SYN=1，ACK=0，表明是连接请求报文，若同意连接，则响应报文中应该使SYN=1，ACK=1

11、终止FIN，用来释放连接。当FIN=1，表明此报文的发送方的数据已经发送完毕，并且要求释放

12、窗口，占2字节，指的是通知接收方，发送本报文你需要有多大的空间来接受

13、检验和，占2字节，校验首部和数据这两部分

14、紧急指针，占2字节，指出本报文段中的紧急数据的字节数

15、选项，长度可变，定义一些其他的可选的参数

1.5.3、tcp连接的建立（三次握手）

最开始的时候客户端和服务器都是处于CLOSED状态。主动打开连接的为客户端，被动打开连接的是服务器。

1. TCP服务器进程先创建传输控制块TCB，时刻准备接受客户进程的连接请求，此时服务器就进入了LISTEN（监听）状态；
2. TCP客户进程也是先创建传输控制块TCB，然后向服务器发出连接请求报文，这是报文首部中的同部位SYN=1，同时选择一个初始序列号 seq=x ，此时，TCP客户端进程进入了 SYN-SENT（同步已发送状态）状态。TCP规定，SYN报文段（SYN=1的报文段）不能携带数据，但需要消耗掉一个序号。
3. TCP服务器收到请求报文后，如果同意连接，则发出确认报文。确认报文中应该 ACK=1，SYN=1，确认号是ack=x+1，同时也要为自己初始化一个序列号 seq=y，此时，TCP服务器进程进入了SYN-RCVD（同步收到）状态。这个报文也不能携带数据，但是同样要消耗一个序号。
4. TCP客户进程收到确认后，还要向服务器给出确认。确认报文的ACK=1，ack=y+1，自己的序列号seq=x+1，此时，TCP连接建立，客户端进入ESTABLISHED（已建立连接）状态。TCP规定，ACK报文段可以携带数据，但是如果不携带数据则不消耗序号。
5. 当服务器收到客户端的确认后也进入ESTABLISHED状态，此后双方就可以开始通信了。

1.5.4、tcp四次挥手

数据传输完毕后，双方都可释放连接。最开始的时候，客户端和服务器都是处于ESTABLISHED状态，然后客户端主动关闭，服务器被动关闭。

1. 客户端进程发出连接释放报文，并且停止发送数据。释放数据报文首部，FIN=1，其序列号为seq=u（等于前面已经传送过来的数据的最后一个字节的序号加1），此时，客户端进入FIN-WAIT-1（终止等待1）状态。 TCP规定，FIN报文段即使不携带数据，也要消耗一个序号。
2. 服务器收到连接释放报文，发出确认报文，ACK=1，ack=u+1，并且带上自己的序列号seq=v，此时，服务端就进入了CLOSE-WAIT（关闭等待）状态。TCP服务器通知高层的应用进程，客户端向服务器的方向就释放了，这时候处于半关闭状态，即客户端已经没有数据要发送了，但是服务器若发送数据，客户端依然要接受。这个状态还要持续一段时间，也就是整个CLOSE-WAIT状态持续的时间。
3. 客户端收到服务器的确认请求后，此时，客户端就进入FIN-WAIT-2（终止等待2）状态，等待服务器发送连接释放报文（在这之前还需要接受服务器发送的最后的数据）。
4. 服务器将最后的数据发送完毕后，就向客户端发送连接释放报文，FIN=1，ack=u+1，由于在半关闭状态，服务器很可能又发送了一些数据，假定此时的序列号为seq=w，此时，服务器就进入了LAST-ACK（最后确认）状态，等待客户端的确认。
5. 客户端收到服务器的连接释放报文后，必须发出确认，ACK=1，ack=w+1，而自己的序列号是seq=u+1，此时，客户端就进入了TIME-WAIT（时间等待）状态。注意此时TCP连接还没有释放，必须经过2∗ *∗MSL（最长报文段寿命）的时间后，当客户端撤销相应的TCB后，才进入CLOSED状态。
6. 服务器只要收到了客户端发出的确认，立即进入CLOSED状态。同样，撤销TCB后，就结束了这次的TCP连接。可以看到，服务器结束TCP连接的时间要比客户端早一些。

1.5.5、tcp总结

1.6、应用层

应用层由来: 用户使用的都是应用程序，均工作于应用层，互联网是开发的，大家都可以开发自己的应用程序，数据多种多样，必须规定好数据的组织形式

应用层功能: 规定应用程序的数据格式

例: TCP协议可以为各种各样的程序传递数据，比如Email、WWW、FTP等等。那么，必须有不同协议规定电子邮件、网页、FTP数据的格式，这些应用程序协议就构成了”应用层”