DPDK流分类优化，不得不知道的事~

最新推荐文章于 2024-07-30 16:25:30 发布
最新推荐文章于 2024-07-30 16:25:30 发布
阅读量598 收藏 2
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_37097605/article/details/101514193
版权
本文介绍了DPDK中的流分类技术，重点讨论了Cuckoo Hashing如何优化流表的查找和插入性能，并提到了TSX硬件功能对并发插入的改进。此外，还提及了使用AVX指令和优化查找开销的方法。
摘要由CSDN通过智能技术生成

0?wx_fmt=gif

流分类

流分类指的是网卡根据数据包特性将其分类的技术，是现今网卡通用的技术之一。也是网络中常用的技术，比如要实现功能卸载，需要知道要将功能卸载到哪个执行单元，在这之前需要对流进行分类。

传统网络设备和专用服务器硬件流分类对比

0?wx_fmt=png

流表运作流程

    一般而言，流表由很多flow key 和相应的 action 构成。flow key 可能是报头中的某些字段，也可能包括有效载荷的部分内容 。对 flow key 进行 hash运算，所得到的hash值就是流表的索引。由于哈希函数不是那么完美，有时会出现冲突，这时就需要再选几个key区分action。

度量一个流表的设计主要有三个重要的指标：

  • 更高的查找率： 意味着更高的吞吐量和更低的延迟

  • 更高的插入率：意味着更快的流更新速度和表初始化速度

  • 高效的利用率：意味着可以添加更多的流

0?wx_fmt=png

    在DPDK中有很多库来实现流分类，我们将讨论的是精确配对。ACL，Hash以及LPM都能帮助我们进行流分类。

0?wx_fmt=png

<
最低0.47元/天 解锁文章
weixin_37097605
关注
DPDK-流分类与多队列
lingshengxiyou的博客
04-10 262
多队列与流分类技术基本被应用到所有DPDK网关类项目中，比如开源的DPVS，美团的四层网关等等，利用多队列及分流技术可以使得网卡更好地与多核处理器，多任务系统配合，从而达到更高效IO处理的目的。这章节以英特尔的网卡为例，介绍多队列和流分类是如何合工作的 ，各种分类方式适合哪些场景，DPDK怎么利用这些网卡特性。
《深入浅出DPDK》读书笔记（九）：流分类与多队列、流过滤、虚拟化流分类方式、流分类技术的使用
RToax
10-29 3360
Table of Contents 94.Linux内核对多队列的支持 95.DPDK与多队列 98.流分类 99.RSS 100.Flow Director 101.服务质量 102.虚拟化流分类方式 103.流过滤 104.流分类技术的使用 105.DPDK结合网卡Flow Director功能 106.DPDK结合网卡虚拟化及Cloud Filter功能 8.4 可重构匹配表 107.小结 系列文章 相关阅读 93.说起网卡多队列，顾名思义，也就是传统网卡的DMA.
DPDK-flow_classify 增加mac地址匹配
最新发布
Big_Bristlegass的博客
07-30 561
dpdk利用flow_classify 示例 增加mac（dpdk里面的自带的acl匹配）
冲破内核限制：使用DPDK快速提升网络应用程序的性能
极客重生
07-17 1174
大家好，这里是极客重生，移动互联网爆炸式发展，导致网络流量徒增，从而推动着网络技术不断地发展，而CPU的运行频率基本停留在10年前的水平，为了迎接超高速网络技术的挑战，软件也需要大幅度创新，结合硬件技术的发展，DPDK（Data Plane Development Kit），一个以软件优化为主的数据面技术应时而生，它为今天高性能网络IO技术的发展提供了绝佳的平台可行性。极客星球：深入理解网络编程同...
《深入浅出DPDK》——学习笔记——流分类
qq_41976997的博客
11-12 2952
深入浅出DPDK——流分类与多队列 流分类 流分类指的是网卡依据数据包的特性将其分类的技术。分类的信息可以以不同不方式呈现给数据包的处理者，比如将分类信息记录于描述符中，将数据包丢弃或者将流导入某个或某些队列中。 包的分类 传统包的分类：IP、TCP、UDP甚至VXLAN、NVGRE等tunnel报文，该信息可以体现在数据包的接收描述符中。 DPDK：Mbuf结构中含有相应的字段来表示网卡分析出的包的类型。 网卡设备同时可以根据包的类型确定其关键字，从而根据关键字确定其收包队列。 其中RSS和
DPDK 性能调优
superbfly的专栏
07-09 5552
要实现最好的性能,需要关闭所有省电或者降频模式。为了达到高性能,需要在BIOS的设置中关闭CPU以及设备的省电模式,让内存运行在所支持的最高频率上面。
【DPDK】DPDK（数据层开发套件）简介--编辑中
小鱼菜鸟的博客
08-15 605
1. DPDK介绍 1) 简介 DPDK全称Intel Data Plane Development Kit，是intel提供的数据层开发套件工具集，是Intel 处理器架构下用户空间高效的数据包处理的库函数和驱动。通俗地说，就是包数据处理加速的软件库。 DPDK不同于Linux系统以通用性设计为目的，而是专注于高性能的处理网络应用中的数据包。具体...
加速NFV（网络功能虚拟化）数据面：SR-IOV和DPDK
lingshengxiyou的博客
08-11 872
这是真的——过去关于 SR-IOV 和 DPDK 的讨论很多，。这是一个挑战：一个以稍微不同的方式讲述数据平面加速故事的机会。显然，“最真诚的奉承”论点在写作界并没有多大分量。 作为 SR-IOV 和 DPDK 的拥护者或直接发起者，英特尔是有关这两者的绝佳信息来源。然而，SR-IOV 扎根于外围组件互连特别兴趣小组，简称 PCI-SIG。基于 AMD (IOV)、Intel (VT-d) 和其他公司的输入输出内存管理单元 (IOMMU) 技术并对其进行标准化，“单根 I/O 虚拟化和共享规范”于 2007
关于操作系统设计的基本原理和设计原则
tugouxp的专栏
03-09 6869
操作系统设计的精妙之处就在于，在底层硬件之上创造了新的抽象， 对于系统初始化来说， 它呈现了执行流到线程转化这一概念，该概念远远比它的实现细节更加重要，处理器以“取指-执行”为周期开始串行执行指令，而初始化代码将自身转化为一个并发处理系统， 这里的关键之处在于，初始化代码并不是创建一个独立的并发系统，然后跳转到新的系统。
DPDK开发者手册流分类rte_flow
legend050709的专栏
03-18 4698
目录参考 参考 https://doc.dpdk.org/guides/prog_guide/index.html 【DPDK programmer guide】 https://doc.dpdk.org/guides/prog_guide/packet_distrib_lib.html 【Packet Distributor Library】
DPDK概述和性能优化总结
06-28
DPDK概述和性能优化总结
从DPDK透视软件优化-C
fdasasfasfdasf的博客
04-03 304
原文链接：绝对干货！初学者也能看懂的DPDK解析 架构级优化： 1、优化IO：使用UIO + MPOOL+MBUF等内存“零操作”技术； 2、简化层次：精简协议处理流程，压缩处理路径； 3、就近原则：模块解耦化前提是数据局部化，本地化； 4、事件驱动+轮询互补：低CPU的事件驱动模型+高优先级的轮询提升IO吞吐能力； 5、MPOOL：中断同步操作，提升并发效率。 系统级优化： 1、减少页交换：按需...
DPDK优化手段
sinat_42308498的博客
07-05 1382
大页内存 大页内存是实现用户态驱动的基础，因为用户态进程的地址空间映射的物理地址不是连续的，而收发报文都需要将BUF的物理地址填入BD描述符，如果没有大页内存，即用户太申请的buf物理地址不连续，如果每次通过查找映射关系来确定用户态申请到的buf的物理地址，则性能会大大降低，甚至不可用，而有了大页内存以后，一次性映射2M设置1G的地址空间，如果将多个大页连续排布起来，则得到的连续物理地址会更多，这样每次申请得到的mbuf虚拟地址，只需要简单计算偏移即可得到对应的物理地址。然后将此物理地址写入对应的BD描..
dpdk协议栈之udp架构优化
qq_29750559的博客
02-26 660
本文主要描述dpdk的优势以及实现udp协议栈采用的架构
《深入浅出DPDK》——学习笔记——流分类技术的应用
qq_41976997的博客
11-15 1908
DPDK结合网卡Flow Director功能 一个设备需要一定的转发功能来处理数据平面的报文，同时需要处理一定量的控制报文。对于转发功能而言，要求较高的吞吐量，需要多个core来支持。对于控制报文的处理，其报文量并不大，但需要保证其可靠性，并且其处理逻辑也不同于转发逻辑。那么，我们就可以使用 RSS来负载均衡其转发报文到多个核上，使用Flow Director将控制报文分配到指定的队列上，使用单独的核来处理。 优点：帮助用户在设计时做到分而治之；节省了软件过滤数据报文的开销；避免了应用在不同核处理之间
DPDK — 性能优化手段
烟云的计算
02-18 1184
如果编译器的版本不支持该款 CPU 的特性，比如 Intel AVX 指令，那么它在编译时只会选用自己支持的指令集，这可能导致编译后生成的 DPDK 应用的性能下降。下图展示了一个通用双路处理器（2 个 CPU Socket）服务器的内部架构，它包含了 2 个 CPU，配有 2 个分离的内存控制单元来连接各自的 Main Memory，芯片组会扩展出大量高速的 PCIe 2.0/3.0 接口，用于连接外设，如 10Gbps 或者 25Gbps 网卡外设。
dpdk性能调优脚本
superbfly的专栏
07-12 938
#!/bin/sh chmod +x /etc/rc.d/rc.local #1、修改grub，设置cpu隔离和1G大页 #isolcpus=1-55 transparent_hugepage=never default_hugepagesz=1G hugepagesz=1G hugepages=16 #2、关闭numa_balancing和watchdog echo 0 > /proc/sys/kernel/numa_balancing echo 0 > /proc/sys/ker.
DPDK峰会：多尺寸网络包内存池优化技术探讨
"DPDK Multiple Sized Packet Buffer Pool是DPDK技术峰会中的一项议题，由ARM Corp的胡兵全主讲，主要探讨了如何优化DPDK的内存池，以适应多尺寸网络包处理，减少内存浪费，提高性能。" 在当前的网络环境中，DPDK...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值