网络—零拷贝

爱吃代码的航航

于 2023-07-24 20:44:28 发布

阅读量299

点赞数

分类专栏：计算机网络网络IO 文章标签：网络 linux 运维

本文链接：https://blog.csdn.net/weixin_60630451/article/details/131904674

版权

计算机网络同时被 2 个专栏收录

17 篇文章 1 订阅

订阅专栏

网络IO

2 篇文章 0 订阅

订阅专栏

一、前言

磁盘可以说是计算机系统最慢的硬件之一，读写速度相差内存 10 倍以上。所以为了提高系统吞吐量，减少磁盘访问次数，有很多优化措施，比如直接IO、异步IO，但其实还有一种优化策略，那就是——零拷贝！

现实情况中，大部分系统在由小变大的过程中，最先出现瓶颈的就是I/O 操作会导致数据在操作系统内核地址空间的缓冲区和用户进程地址空间定义的缓冲区之间进行传输。设置缓冲区最大的好处是可以减少磁盘 I/O 的操作，如果所请求的数据已经存放在操作系统的高速缓冲存储器中，那么就不需要再进行实际的物理磁盘 I/O 操作；然而传统的 Linux I/O 在数据传输过程中的数据拷贝操作深度依赖 CPU，也就是说 I/O 过程需要 CPU 去执行数据拷贝的操作，因此导致了极大的系统开销，限制了操作系统有效进行数据传输操作的能力。

零拷贝技术可以减少CPU搬运数据的次数，在网络系统中起到很重要的优化作用。

二、相关名词

2.1 DMA

DMA，全称 Direct Memory Access，即直接存储器访问，是为了避免 CPU 在磁盘操作时承担过多的中断负载而设计的；在磁盘操作中，CPU 可将总线控制权交给 DMA 控制器，由 DMA 输出读写命令，直接控制 RAM 与 I/O 接口进行 DMA 传输，无需 CPU 直接控制传输，也没有中断处理方式那样保留现场和恢复现场过程，使得 CPU 的效率大大提高。

CPU 不再参与将数据从磁盘控制器缓冲区搬运到内核空间的工作，这部分工作全程由 DMA 完成。但是 CPU 在这个过程中也是必不可少的，因为传输什么数据，从哪里传输到哪里，都需要 CPU 来告诉 DMA 控制器。

2.2 MMU

Memory Management Unit—内存管理单元，主要实现：
- 竞争访问保护管理需求：需要严格的访问保护，动态管理哪些内存页/段或区，为哪些应用程序所用。这属于资源的竞争访问管理需求；
- 高效的翻译转换管理需求：需要实现快速高效的映射翻译转换，否则系统的运行效率将会低下；
- 高效的虚实内存交换需求：需要在实际的虚拟内存与物理内存进行内存页/段交换过程中快速高效。

2.3 Page Cache

为了避免每次读写文件时，都需要对硬盘进行读写操作，Linux 内核使用页缓存（Page Cache） 机制来对文件中的数据进行缓存。

此外，由于读取磁盘数据的时候，需要找到数据所在的位置，但是对于机械磁盘来说，就是通过磁头旋转到数据所在的扇区，再开始「顺序」读取数据，但是旋转磁头这个物理动作是非常耗时的，为了降低它的影响，PageCache 使用了「预读功能」。

比如，假设 read 方法每次只会读 32 KB 的字节，虽然 read 刚开始只会读 0 ～ 32 KB 的字节，但内核会把其后面的 32 ～ 64 KB 也读取到 PageCache，这样后面读取 32 ～ 64 KB 的成本就很低，如果在 32 ～ 64 KB 淘汰出 PageCache 前，有进程读取到它了，收益就非常大。