计算机网络

一.OSI七层协议

• 1.物理层
  机器A往机器B发送比特流，机器B要保证能收到比特流，这就是物理层要做的事情。物理层主要定义了网络设备的标准，如：网线的类型、光纤的接口类型。网卡就是工作在这一层里面的，这一层主要负责数模、模数的转换(比特流转化为电流，电流再转化为比特流)
• 2.数据链路层
  在传输比特流的过程中，会产生错传、数据传输不完整的可能，因此数据链路层定义了如何格式化数据以进行传输，这一层通常还提供错误检测和纠正，以确保数据传输的可靠性，本层将比特数据组成了“帧”，其中交换机工作在这一层中，对帧解码，并根据帧中包含的信息将数据发送给正确的接收方
• 3.网络层
  随着网络节点的不断增加，点对点通信的时候是需要经过多个节点的，如何找到目标节点、如何找到最佳路径便成为了首要需求，此时便有了网络层。其主要功能是将网络地址翻译成对应的物理地址，并决定如何将数据从发送方路由到接收方。网络层通过综合考虑发送优先权、网络拥塞程度、服务质量以及可选路由的花费来决定从一个节点A到另一个节点B的最佳路径。路由器属于网络层，此时的数据我们称之为“数据包”。本层需要关注的协议主要是TCP/IP协议中的IP协议
• 4.传输层
  随着网络通信需求的进一步扩大，通信过程中需要发送大量的数据(如海量文件的传输，可能需要很长的时间)，而网络在通信的过程中会中断好多次，此时为了保证传输大量文件时的准确性，需要对发出去的数据进行切分，切分为一个个的小段落(segment),其中一个段落丢失了怎么办？要不要重传？每个段落要按照顺序到达吗？这些便是传输层需要考虑的问题了。传输层解决了数据之间的传输，解决了传输质量的问题，该层为OSI模型中最终要的一层。以太网无法接收超过1500字节的数据包。本层需要关注的协议主要是TCP/IP协议中的TCP协议和UDP协议。
• 5.会话层
  建立和管理应用程序之间的通信
• 6.表示层
  windows上无法运行linux中的脚本文件，机器之间存在数据通信的语法差异。表示层就是为了解决不同和操作系统之间的通信语法问题。在表示层，数据将按照网络能理解的方案进行格式化，这种格式化也因所使用网络的类型不同而不同。
• 7.应用层
  规定发送方和接收方必须使用固定格式的消息头，消息头必须使用某种固定的组成，而且消息头里必须记录消息体的长度等一系列信息，以方便接受方能够正确地解析发送方发送的数据，应用层旨在让我们更方便地应用从网络中接收到的数据。本层需要关注的协议主要是TCP/IP协议中的HTTP协议。

二.TCP/IP概念层模型

• 1.应用层(应用层、表示层、会话层)
• 2.传输层
• 3.网络层
• 4.链路层(数据链路层，物理层)

2.1 IP协议

• IP协议是无连接的通信协议，它不会占用两个正在通信的计算机之间的通信线路，这样IP就降低对网络线路的需求，每条线都可以满足许多计算机之间的通信需要，通过IP，消息或者其他会被分割为较小的独立的包，并通过在因特网在计算机之间传送。IP负责将每个包，路由至其目的地。但IP协议没有做任何事情来确认数据包是否按顺序发送，或者包被破坏。所以IP数据包是不可靠的，需要由它的上层协议作出控制。

2.2 TCP协议

• 传输控制协议TCP 是传输层的协议
• 面向连接的，可靠的，基于字节流的传输层通信协议
• 将应用层的数据流分割成报文段并发送给目标节点的TCP层
  报文段的长度通常受该计算机连接网络的数据链路层最大传输单元及MPU的限制，之后TCP把结果包传给IP层
• 数据包都有序号，对方收到则发送ACK确认，未收到则重传
  数据包有序号的原因就是为了保证包不丢失，序列号(Sequence Number),也保证了传送到目标节点包的按序处理。然后接收端实体对已成功收到的包发回一个相应的确认，即ACK确认。如果发送端实体在合理的往返时延(RTT)内未收到确认，那么对应的数据包会被认为已丢失，并且将会对其进行重传。
• 使用校验和未校验数据在传输过程中是否有误
  TCP用奇偶校验和函数来检验数据是否有错误，在发送和接收时都要计算校验和

2.3 TCP报文头

TCP报文是TCP层传输的数据单元，也叫报文段。

• 1.端口号：用来标识同一台计算机的不同的应用进程。
  1)源端口：源端口和IP地址的作用是标识报文的返回地址。
  2)目的端口：端口指明接收方计算机上的应用程序接口。
  TCP报头中的源端口号和目的端口号同IP数据报中的源IP与目的IP唯一确定一条TCP连接。

• 2.序号和确认号：是TCP可靠传输的关键部分。序号是本报文段发送的数据组的第一个字节的序号。在TCP传送的流中，每一个字节一个序号。
  一个报文段的序号为300，此报文段数据部分共有100字节，则下一个报文段的序号为400。所以序号确保了TCP传输的有序性。确认号，即ACK，指明下一个期待收到的字节序号，表明该序号之前的所有数据已经正确无误的收到。确认号只有当ACK标志为1时才有效。比如建立连接时，SYN报文的ACK标志位为0。

• 3.数据偏移／首部长度：
  4bits。由于首部可能含有可选项内容，因此TCP报头的长度是不确定的，报头不包含任何任选字段则长度为20字节，4位首部长度字段所能表示的最大值为1111，转化为10进制为15，15*32/8 = 60，故报头最大长度为60字节。首部长度也叫数据偏移，是因为首部长度实际上指示了数据区在报文段中的起始偏移值。

• 4.控制位
  由8个标志位来组成，每个标志位表示一个控制的功能，其中常见的包括：

  1 2 3 4 5 6

  URG: 紧急指针标志。1-紧急指针有效，0-忽略紧急指针 ACK: 确认序号标志。1-确认序号有效，0-报文中不含确认信息，忽略确认字段 PSH: push标志。1-表有push的标志，指示接收方在接收到报文段以后，应尽快将报文段交给应用程序，而不是在缓冲区排队 RST: 重置连接标志。用于重置，主机崩溃或者其他原因而出现错误的连接，或者用于拒绝非法的报文端和拒绝连接请求 SYN: 同步序号，用于建立连接过程，在连接请求中SYN=1,ACK=0表示该数据段没有使用捎带的确认域，而连接应答捎带一个确认，即SYN=1,ACK=1 FIN: finsh标志。用于释放连接，唯一标识发送方没有数据发送，即关闭本方数据流，

• 5.窗口
  滑动窗口大小，用来告知发送端接受端的缓存大小，以此控制发送端发送数据的速率，从而达到流量控制。窗口大小是一个16bit字段，因而窗口大小最大为65535。

• 7.校验和
  奇偶校验，此校验和是对整个的 TCP 报文段，包括 TCP 头部和 TCP 数据，以 16 位字进行计算所得。由发送端计算和存储，并由接收端进行验证。

• 8.紧急指针
  只有当 URG 标志置 1 时紧急指针才有效。紧急指针是一个正的偏移量，和顺序号字段中的值相加表示紧急数据最后一个字节的序号。 TCP 的紧急方式是发送端向另一端发送紧急数据的一种方式。

• 9.选项和填充
  最常见的可选字段是最长报文大小，又称为MSS(Maximum Segment Size)，每个连接方通常都在通信的第一个报文段(为建立连接而设置SYN标志为1的那个段)中指明这个选项，它表示本端所能接受的最大报文段的长度。选项长度不一定是32位的整数倍，所以要加填充位，即在这个字段中加入额外的零，以保证TCP头是32的整数倍。

• 10.数据部分
  TCP 报文段中的数据部分是可选的。在一个连接建立和一个连接终止时，双方交换的报文段仅有 TCP 首部。如果一方没有数据要发送，也使用没有任何数据的首部来确认收到的数据。在处理超时的许多情况中，也会发送不带任何数据的报文段。

三.TCP三次握手

当应用程序希望通过TCP与另一个应用通信时，它会发送一个通信请求，这个请求必须被送到一个确切的地址，在双方握手之后，TCP将在两个应用之间建立一个全双通的通信，这个全双通(A可以给B发送信息的同时，B也能够给A发信息)的通信将占用两个计算机之间的通信线路，直到被一方，或者双方关闭为止。

第一次握手

• 一开始客户端和服务器端都处于Close状态。
• 刚开始的时候TCP服务器进程先创建传输控制块(PCD)，时刻准备接受其他客户进程发送过来的连接请求。
• 此时服务端进入了Listen，即监听的状态。此时客户端进程也先创建一个传输控制块(PCD)然后向服务器发出连接请求报文，SYN就是TCP Flags的同步序号，SYN =1,选择一个初始序号seq =x ,x可以是任意的正整数值。
• 此时TCP客户端进程就进入了一个SYN-SENT同步已发送的状态，发送给服务端的数据包，即报文端会被称为SYN报文段，不能携带数据，但是要消耗一个序号。

第二次握手

• 当服务器接收到一个报文请求之后，同意连接，则发出确认报文，确认报文中包含TCP Flags中的SYN,ACK两位的字段。
• SYN=1,ACK=1,seq=y,ack=x+1。
• ack = x+1的原因是第一次握手SYN报文中指定了seq=x,服务端要回应相关的信息，并且第一次握手中报文消耗了一个序号，因此ack=x+1,同时为自己的缓存初始化一个序列号，即seq=y。此时服务器就进入到了SYN-RCVD,即同步收到的状态。
• 这个报文也是不能携带数据的，同时也需要消耗一个序号。

第三次握手

• 当TCP客户进程收到确认报文之后，还要给服务器一个确认。ACK=1,seq=x+1,ack=y+1

• ack=y+1,原因是服务器给客户端发送一个seq=y，客户端作为回应。所以就加了1。同时第二次握手的报文会消耗一个序号。

• 同时第一次握手的时候，客户端告知(ack)服务器序号被+1了，即seq =x ,第二次握手时ack=x +1 。所以第三次握手时候seq = x+ 1。

• 此时TCP连接建立，客户端就进入了ESTAB-LISHED,即已建立连接的状态，此时TCP规定这个时候的报文段可以携带数据。第一次，第二次握手的报文段都是不可以携带的。也可以不携带数据，这样就不会消耗序号了。

• 当服务器也收到了客户端的确认后也会进入ESTAB-LISHED状态。

完成三次握手之后，双方就可以开始通信了。

总结

• 在TCP/IP协议中，TCP协议提供可靠的链接服务，采用三次握手建立一个连接
• 第一次握手：建立连接时，客户端发送SYN包(SYN=j)到服务器，进入SYN_SEND状态，等待服务器确认；
• 第二次握手：服务器收到SYN包，必须确认客户的SYN(ack=j+1),同时自己也发送一个SYN包(syn=k),即SYN+ACK包，此时服务器进入SYN_RECV状态；
• 第三次握手：客户端收到服务器的SYN+ACK包，向服务器发送确认包ACK(ack=k+1),此时包发送完毕，客户端和服务区进入ESTABLISHED状态，完成三次握手。

四.TCP四次挥手

• 断开一个TCP连接时，需要客户端和服务器端总共发出4个包，以确认连接的断开。
• 在Socket编程中，这过程由客户端或服务端任一方，执行Close来触发。

“挥手”是为了终止连接，TCP四次挥手的流程图如下

上图由客户端主动触发close。数据传送完毕之后，双方都可以释放连接，最开始的时候客户端和服务端都处于ESTABLISHED状态。然后客户端主动关闭，服务器被动关闭。

第一次挥手

首先客户端进程发出连接释放报文(FIN)，并且停止发送数据。在该数据报的报头中，TCP Flags 中的 FIN = 1，假设客户端定义的序列号为seq=u，该值等于前面ESTABLISHED状态数据最后一次发送的时候，已经传送过来的数据的最后一个字节的序号加上1。此时客户端就进入了FINWAIT1,这个终止等待1的状态。TCP规定即使FIN不携带数据，也要消耗掉一个序号。即回值的时候u要加上1。

第二次挥手

当服务器收到连接释放报文之后，也要发出确认报文，即ACK=1。作为回应akc=u+1,并且也带上了自己的序列号seq=v。此时服务端就进入了CLOSEWAIT,关闭等待的状态。TCP服务器通知高层的进程，客服端要释放与服务器之间的连接，这时候会处于半关闭的状态，即客户端没有数据要发送了，但是服务器要发送数据，客户端还是能够接受的。CLOSEWAIT状态还要持续一段时间。

第三次挥手

客户端收到服务器的确认请求之后，客户端就进入了FIN_WAIT_2,即终止等待2状态。等待服务器发送释放连接报文，也就是第三次挥手的请求。因此在这个时间内还需要接收服务器发送最后的数据，服务器将最后的数据发送完毕后就会向客户端发送连接释放报文，FIN=1,ack=u+1。有可能在半关闭的状态，服务器很可能又发送了一些数据，假定此时的序号变为了w。此时服务器就进入到了LAST_ACK的状态。等待客户端的最终确认。

第四次挥手

客户端在收到服务器的连接释放报文之后，必须发出确认，即ACK=1，然后再将服务器发送过来的w变成w+1,回发给服务器。

此时的seq为u+1。此时客户端就进入了TIME_WAIT,即时间等待的状态，这时客户端的TCP连接还没有释放，必须经过2MSL时间后，连接才会真正的释放，才会进入到CLOSED状态。MSL最长报文段生命。在Linux MSL 为30s,而服务器只要收到客户端发出的确认，立即就进入CLOSED状态。

由图可知，服务器结束TCP的连接时间要比客户端稍早一些。

总结

• 第一次挥手：Client发送一个FIN，用来关闭Client到Server的数据，Client进入FIN_WAIT_1状态；
• 第二次挥手：Server收到FIN后，发送一个ACK给Client，确认序号为收到序号+1(与SYN相同，一个FIN占用一个序号)，Server进入CLOSE_WAIT状态,Client进入FIN_WAIT_2状态
• 第三次挥手：Server发送一个FIN，用来关闭Server到Client的数据传送，Server进入LAST_ACK状态；
• 第四次挥手：Client收到FIN后，Client进入TIME_WAIT状态，接着发送一个ACK给Server,确认序号为收到序号+1，Server进入CLOSED状态，完成四次挥手。

4.1 为什么会有TIME_WAIT状态？

• 确保由足够的时间让对方收到ACK
  TIME_WAIT状态用来保证有足够的时间让对端接收完ACK，如果被动关闭的那方没有收到ACK就会触发被动端重发FIN包，一来一去正好是2MSL。
• 避免新旧连接混淆
  有足够的时间让这个连接，不会跟后面的连接混在一起，因为有些路由器会缓存IP数据包。如果连接被重用了，那么这些延迟被收到的包就有可能跟新连接混在一起

4.2 为什么需要四次挥手才能断开连接？

• 全双通的意思是允许数据在两个方向上同时传输，即在同一时间，服务器可以发送数据给客户端，客户端也可以发送数据给服务器。
• 因为全双工，发送方和接收方都需要FIN报文和ACK报文
• 发送方和接收方各只需两两次挥手即可，只不过有一方是被动的，所以看上去就成了四次挥手

4.3 服务器出现CLOSE_WAIT状态的原因

• 问题其中一个表现是客户端一直在请求，但是返回给客户端的信息是异常的。服务端压根也没收到请求。
• 服务器保持大量的CLOSE_WAIT只有一种情况，那就是在对方发送一个FIN报文之后，程序这边没有进一步发送ACK，或者FIN报文以确认。

4.4 对方关闭Socket连接，我方忙于读或写，没有及时关闭连接

对方关闭连接后，程序里没有检测到，或者程序本身就已经忘了这个时候需要关闭连接，于是这个资源就被程序占用着。
遇到这种情况多数是程序里面有BUG，通常是有些连接没有释放检查代码，特别是释放资源代码检查配置，特别是处理请求的线程配置

五.TCP和UDP的区别

相比TCP报文，UDP的域少了很多。简单了很多。简单的报文结构意味着UDP不像TCP那样，支持错误重传，滑动窗口。

5.1UDP的特点

• 面向非连接
  传输数据之前，源端和终端不建立连接，当它想传送时，就简单地去抓取来自应用程序的数据，并尽可能快地把它扔到网络上。
  在发送端UDP传送数据的速度仅仅是受应用程序生成数据地速度，计算机的能力和传输带宽的限制。
  在接收端UDP把每个消息段放在队列中，应用程序每次从队列中读取一个消息段。
• 不维护连接状态，支持同时向多个客户端传输相同的消息
  由于传输数据不建立连接，所以不需要维护连接状态。
• 数据包报头只有8个字节，额外开销较小
  相对TCP的20个字节包小很多
• 吞吐量只受限于数据生成速率，传输速率以及机器性能
  吞吐量不受拥挤控制算法的调节，只受应用软件生成数据的效率，传输带宽，源端和终端主机性能的限制。
• 尽最大努力交付，不保证可靠交付，不需要维持复杂的链接状态表
• 面向报文，不对应用程序提交的报文信息进行拆分或者合并
  发送方的UDP对应用程序，交下来的报文，在添加守护后就向下交付给IP层，既不拆分，也不合并。而是保留报文的边界。因此应用程序应该选择合适的报文大小，UDP将多数的控制交给上层去解决。

5.2 总结

TCP和UDP是OSI模型中，运输层的协议。TCP提供可靠的传输，而UDP常被用于让广播和细节控制交给应用层的通信传输。

• 面向链接与面向无连接
  TCP有三次握手的过程，UDP合适消息的多播发布，从单个点向多个点发布信息
• 可靠性
  TCP利用握手，确认，重传机制提供了可靠性保证。UDP可能会被丢失，不知道有没有被接收
• 有序性
  TCP利用序列号保证了消息报的顺序交付，达到可能无序，但是TCP最终还是会排序的。
  UDP不具备有序性
• 速度
  TCP速度比较慢，因为要创建连接，保证消息的可靠性和有序性，需要额外做很多事。
  UDP比较适合对速度比较敏感的应用。比如在线视频媒体，电视广播，多人在线游戏。
• 量级
  TCP属于重量级的
  UDP属于轻量级的
  体现在源数据头部大小 TCP 20个字节 UDP 8个字节

六.TCP的滑动窗口

https://blog.csdn.net/qq_41398448/article/details/100775989

七.HTTP相关

https://blog.csdn.net/qq_41398448/article/details/100780050

八.HTTP和HTTPS的区别

https://blog.csdn.net/qq_41398448/article/details/100830299

九.ping和talnet命令

ping

基于ICMP协议，验证IP的可达性，ping ip地址

1 2	ping 192.168.205.10

talne

检车服务的可用性,ping ip地址 端口号

1 2	ping 192.168.205.10 8080

十.网络抓包工具

wireshark