浅谈scatter-gather DMA

最新推荐文章于 2025-03-26 11:15:41 发布

ByteOder

最新推荐文章于 2025-03-26 11:15:41 发布

阅读量1.3w

点赞数 22

分类专栏：计算机系统文章标签： scatter-gather DMA 零拷贝

本文链接：https://blog.csdn.net/weixin_38006908/article/details/87375404

版权

计算机系统专栏收录该内容

2 篇文章

订阅专栏

本文深入探讨了DMA（直接内存访问）技术，解释了其如何在不依赖CPU的情况下进行数据传输，从而提升嵌入式系统和网络数据处理的效率。特别介绍了scatter-gather DMA的工作原理及优势，并通过dpdk实例展示了其在ip分片零拷贝技术中的应用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在正文开始之前需要先搞明白以下几个问题：

1. 什么是DMA？

DMA的中文名称叫做直接内存访问，是一种不需要CPU参与，就能实现数据搬移的技术（从一个地址空间到另一个地址空间）。

2. DMA有什么用？

一定程度上解放CPU，对于实现高效嵌入式系统与加速网络数据处理有极其重要的作用。

3. DMA的实现简述

在实现DMA传输时，是由DMA控制器直接掌管总线，因此，存在着一个总线控制权转移问题。即DMA传输前，CPU要把总线控制权交给DMA控制器，而在结束DMA传输后，DMA控制器应立即把总线控制权再交回给CPU。一个完整的DMA传输过程必须经过DMA请求、DMA响应、DMA传输、DMA结束 4个步骤。

scatter-gather DMA 与 block DMA

传统的block DMA 一次只能传输物理上连续的一个块的数据，完成传输后发起中断。而scatter-gather DMA允许一次传输多个物理上不连续的块，完成传输后只发起一次中断。

传统的block DMA像这样：

先进的scatter-gather DMA像这样：

这样做的好处是直观的，大大减少了中断的次数，提高了数据传输的效率。

scatter-gather DMA的应用

dpdk在ip分片的实现中，采用了一种称作零拷贝的技术。而这种实现方式的底层，正是由scatter-gather DMA支撑的。dpdk的分片包采用了链式管理，同一个数据包的数据，分散存储在不连续的块中（mbuf结构）。这就要求DMA一次操作，需要从不连续的多个块中搬移数据。附上e1000驱动发包部分代码：

		
uint16_t
eth_em_xmit_pkts(void *tx_queue, struct rte_mbuf **tx_pkts,
		uint16_t nb_pkts)
{
    //e1000驱动部分代码
    ...
    m_seg = tx_pkt;
	do {
		txd = &txr[tx_id];
		txn = &sw_ring[txe->next_id];

		if (txe->mbuf != NULL)
			rte_pktmbuf_free_seg(txe->mbuf);
		    txe->mbuf = m_seg;

		/*
		* Set up Transmit Data Descriptor.
		*/
		slen = m_seg->data_len;
		buf_dma_addr = rte_mbuf_data_iova(m_seg);

		txd->buffer_addr = rte_cpu_to_le_64(buf_dma_addr);
		txd->lower.data = rte_cpu_to_le_32(cmd_type_len | slen);
		txd->upper.data = rte_cpu_to_le_32(popts_spec);

		txe->last_id = tx_last;
		tx_id = txe->next_id;
		txe = txn;
		m_seg = m_seg->next;
	} while (m_seg != NULL);

	/*
	* The last packet data descriptor needs End Of Packet (EOP)
	*/
	cmd_type_len |= E1000_TXD_CMD_EOP;
	txq->nb_tx_used = (uint16_t)(txq->nb_tx_used + nb_used);
	txq->nb_tx_free = (uint16_t)(txq->nb_tx_free - nb_used);
    ...
}