网卡设备中DMA与Cache的一致性问题

深入理解缓存 TLB 原理

 cache保持一致性的写入方式———write back:

1、只把更新的cache区标记为dirty，并不同步写入memory。

2、只在cache区要更新新的数据时，才会更新memory。

关于网卡的DMA缓冲区：

1、网卡等外设的DMA传输，要求缓冲区的物理地址必须连续。因为DMA硬件时直接和内存进行数据传输。

2、DMA传输要注意与cache的一致性问题。必须保证DMA缓冲区中的数据时最新的。有两种方法：cache flush和cache invalidate

cache flush:将cache中的数据写回内存（先clean再invalidate）。

cache invalidate:解除内存与cache的绑定关系。

        背景描述：DMA搬运数据，目标内存带cache，后续CPU读取内存数据时，若cache命中，则读到的数据和DMA搬运后的不一致。

        解决方法：在DMA搬运前先进行cache invalidate操作。这样后续CPU访问这块内存，就不会使用cache的数据。

cache clean：检查对应内存cache line的dirty bit，如果为1，将cache line的内容写回下一级存储，并置dirty bit为0.

具体情况再描述：

1、CPU先读，DMA后访问，无需先clean.

2、CPU先写，DMA后访问，要先clean.

3、DMA改写内存，CPU后访问，要做先cache invalidate。这样后续CPU访问这块内存，就不会使用cache的数据。

参考：(139条消息) 刷cache的3种操作：clean/invalid/flush_cache flush_小葫芦写代码的博客-CSDN博客

        

网卡驱动流程分析（发送—初始化—接收）：

零拷贝是怎么实现的？

思路：让协议栈可以直接使用驱动收到的的网络数据。

实现的方式：将原本DMA描述符指向的buf地址换成pbuf结构的payload指针指向的内容即可。

接收：

初始化阶段，

1. 调用协议栈提供的接口创建零拷贝池；
2. 从零拷贝池申请pbuf；
3. 将pbuf中的payload赋值给DMA描述符；

传输阶段，

1. Pbuf给到协议栈后会被回收；
2. 再次执行初始化阶段的二三步骤