《Netty核心原理》第一篇 网络通信原理

《Netty 4核心原理》 学习总结

第一篇 I/O基础篇

第一章 网络通信原理

1.1 网络基础架构 - C/S信息传输流程

• 完成一次网络通讯的5个步骤：
  • 1.客户端将应用内存中的数据发送/copy到操作系统内存
  • 2.操作系统按照客户端指定的协议，调用网卡发送数据
  • 3.网络传输
  • 4.服务端调用系统接口，将数据从计算机内存copy到应用内存
  • 5.服务端操作系统按照发送时的协议，从网卡读取数据，并将数据copy给应用

1.2 TCP/IP 五层模型详解（4层与7层是对5层模型的缩减或拆解）

• 应用层
  • 用户使用的应用即应用层操作
  • 协议：DNS协议、http、FTP、SMTP、
• 传输层
  • 建立端口与端口的通信机制，TCP/UDP协议
• 网络层
  • 网络普及：全世界的网络是由一个个小的局域网组成，数据包只能在一个局域网（广播域）内发送，跨局域网通信需要通过路由转发
  • 作用：区分哪些计算机在同一广播域，那些不在。根据区分结构选择使用广播或路由的方式进行数据发送
  • 原理：ip与子网掩码进行与（&）操作，结果一致则证明在同一个子网络
• 数据链路层
  • 单纯的0/1信号没有任何意义，本层的功能就是定义电信号的分组方式，多少位为一组，每组代表什么意思，
  • 例如：请求报文中head固定18个字节，data为46字节，那前18位0/1就代表head（head中包含发送者地址6字节，接收者地址6字节，数据类型6字节）
• 物理层
  • 根据电压的高低，代表0/1信号进行传输

1.3 网络请求原理全过程（浏览器中输入url发生了什么）

• 1.浏览器中输入访问地址：www.baidu.com
• 2.通过DNS域名系统服务器（基于UDP协议）获得IP地址
• 3.想目标机器发起http请求，数据内容包含数据格式、类型、http协议相关等
• 4.TCP协议：TCP数据包嵌入http数据包，TCP数据包需要设置访问端口
• 5.IP协议：TCP数据包嵌入到IP数据包，IP数据包需要设置双方的IP地址
• 6.以太网协议：ip数据包嵌入到以太网数据包，以太网数据包设置双方的MAC地址
• 7.服务响应

1.4 网络通信之“魂” —— socket

• 通信的基础
  • 两个进程间想要通信的最基本前提是存在一个唯一标识，能够识别一个进程
  • 在单机中可以用PID标识一个进程，但是在网络中就不行了
  • 根据本章内容我们不难得到：ip地址能够标识唯一主机，TCP层的协议和端口能够标识唯一进程，所以使用IP+协议+端口就能唯一标识网络中的进程
• socket通常叫做套接字，socket是应用层和传输层之间的一个抽象，他将TCP/IP层的操作抽象为简单的接口调用，实现网络中的通信。

第二章 java I/O演进之路

• 2.3.1 阻塞与非阻塞
  • BIO的阻塞
    • 当一个线程调用read()或write()时，当前线程会被阻塞，知道有可用数据读取或数据读取完成
  • NIO的非阻塞
    • 当一个线程通过通道（Channel）发送读取数据请求时，如果没有数据准备好，直接返回，不会阻塞当前线程，在数据接收完成，变成可读取之前，当前线程可以做其他事。非阻塞也是这样
• 2.3.2 Selector（选择器）在NIO中的作用
  • Selector允许一个单独的线程来监听多个输入通道（Channel），即多个Channel可以注册到一个Selector上，然后selector使用一个线程来“选择”可用channle，可用channel即已经有可以处理的数据输入或已经准保好数据的通道
• 2.3.3 AIO简介
  • 真正的AIO依赖于操作系统，这里大家需要掌握Epoll相关知识
  • 由于AIO需要操作系统按照aio_read的参数，将数据写入到内核缓存中后，再通知应用来获取数据，所以AIO体现在准保数据（接收数据）、数据拷贝都由操作系统来完成，完成后通知应用即可。

第二篇 初始Netty

2.1 I/O 的问世

• 2.1.1 什么是I/O

  • 在UNIX中，一切皆文件，文件就是一串二进制流。而I/O就是对这些流的手法操作。
  • 计算机中有很多文件（流），怎么知道要操作哪个流，是由操作系统内核会创建FD（文件描述符）标识，对FD的操作就是对流的操作。
  • 创建一个Socket，通过系统函数会返回一个FD，socket的操作就变成了对流的操作。

• 2.1.2 I/O交互流程

  • 磁盘I/O交互分两阶段：
    • 操作系统：文件数据从磁盘到内核空间（操作系统）
    • 应用程序：数据从内核空间到用户空间
  • 网络I/O包含两个阶段
    • 等待网络数据到达网卡，数据读取到内核缓冲区
    • 从内核缓冲区复制数据到用户空间

• 2.1.3 五种I/O通信模式

  • 图：略
  • 总结与对比：整个IO过程分为两部分：发起recvfrom（接收数据）时等待数据包，数据拷贝到用户空间
    • 阻塞IO：整个流程阻塞；如果有多个请求，需要开启多个线程来支持
    • 非阻塞IO：数据拷贝阻塞；等待数据时轮训检查，可支持多请求，但请求时效性难以确定
    • 多路复用IO：等待数据、数据拷贝阻塞；等待数据阻塞是因为采用复用器selector，selector会监听注册进来的所有IO，发起recvfrom请求后会阻塞，任意请求数据准备完成，则返回处理。可支持多请求，时效性好
    • 信号驱动IO：应用启动时与系统建立SIGIO信号调用，当内核有数据包准备好时，想应用发送信号，应用再发起recvfrom请求阻塞（等待数据拷贝）获取数据
    • 异步IO：用户发起aio_readhan函数调用，参数包含：FD描述符，缓冲区指针、缓冲区大小及FD偏移量，内核接收到数据后便将数据按照入参写入缓存，完成后通知应用

• 2.1.4 同步、异步；阻塞、非阻塞解答（不懂？接着看2.3你就明白了）

  • 同步、异步区别：请求发起方对结果的获取是主动发起还是被动通知的
    • 同步：请求发起方对结果是主动获取，eg：同步等待结果、轮训查询结果
    • 异步：请求方获取结果是被动通知的，eg：请求发起后，该干嘛干嘛，有结果了被调用方会主动发起请求或消息通知调用方
  • 阻塞与非阻塞：是对线程状态的描述，通常指IO阻塞
    • 阻塞：发起请求后，请求线程是挂起状态，只能等待结果
    • 非阻塞：发起请求后，请求时运行状态，还可以做其他事情

2.3 从BIO到NIO的演进

• 2.3.1 阻塞与非阻塞
  • BIO的阻塞
    • 当一个线程调用read()或write()时，当前线程会被阻塞，知道有可用数据读取或数据读取完成
  • NIO的非阻塞
    • 当一个线程通过通道（Channel）发送读取数据请求时，如果没有数据准备好，直接返回，不会阻塞当前线程，在数据接收完成，变成可读取之前，当前线程可以做其他事。非阻塞也是这样
• 2.3.2 Selector（选择器）在NIO中的作用
  • Selector允许一个单独的线程来监听多个输入通道（Channel），即多个Channel可以注册到一个Selector上，然后selector使用一个线程来“选择”可用channle，可用channel即已经有可以处理的数据输入或已经准保好数据的通道
• 2.3.3 AIO简介
  • 真正的AIO依赖于操作系统，这里大家需要掌握Epoll相关知识
  • 由于AIO需要操作系统按照aio_read的参数，将数据写入到内核缓存中后，再通知应用来获取数据，所以AIO体现在准保数据（接收数据）、数据拷贝都由操作系统来完成，完成后通知应用即可。

第二篇 初始Netty

---