(dpdk f-stack) VMware跑 f-stack

已于 2022-12-16 09:11:14 修改
阅读量770 收藏
点赞数
分类专栏： f-stack dpdk 文章标签： nginx
于 2021-04-17 07:54:54 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ygm_linux/article/details/115784440
版权
f-stack 同时被 2 个专栏收录
17 篇文章 21 订阅 ¥59.90 ¥99.00
订阅专栏
dpdk
19 篇文章 9 订阅
订阅专栏

目的

VMware虚拟机上跑f-stack实现nginx web反向代理。

注意：vmxnet3网卡虽然可以多队列，但实际上只有一个队列收发包正常。因此建议使用e1000虚拟网卡即可。如使用多队列建议使用vsphere虚拟化环境或者直接使用物理设备。

虚拟机网卡配置为vmxnet3

    修改虚拟机安装目录下 xxxx.vmx 配置文件：

    修改文件：DPDK-FWD.vmx

    hpet0.present = "true"

    numa.vcpu.maxPerVirtualNode = "1"

    ethernet1.virtualDev = "vmxnet3"   #e1000e只支持网卡单队列，vmxnet3支持网卡多队列

    ethernet1.wakeOnPcktRcv = "true"

    ethernet2.virtualDev = "vmxnet3"

    ethernet2.wakeOnPcktRcv = "true"

Linux系统版本要求

    Linux发行版本: CentOS Linux release 7.3.1611 (Core)

    Linux内核版本：3.10.0-514.el7.x86_64

    官网参考：

了解本专栏 订阅专栏 解锁全文
ygmdream
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
订阅专栏
(dpdk f-stack) -网卡多队列
阳光梦的专栏
04-17 1041
网卡是如何将网络中的报文分发到不同的队列呢？ 常用的方法有微软提出的RSS与英特尔提出的Flow Director技术，前者是根据哈希值希望均匀地将包分发到多个队列中。后者是基于查找的精确匹配，将包分发到指定的队列中。 1、RSS（Receive-Side Scaling，接收方扩展） RSS就是根据如下“关键字”通过哈希函数计算出哈希值，再由哈希值对网卡队列数求余确定数据包放到哪个队列。 关键字是如何确定的呢？ 哈希函数一般选取...
dpdk编译
lingshengxiyou的博客
12-22 712
物理机: default_hugepages=1G hugepagesz=1G hugepages=20 isolcpus=0-7 虚拟机： default_hugepages=1G hugepagesz=2M hugepages=1024 isolcpus=0-2 具体大小视情况而定。重启虚拟机，使得hugepage和isocpus配置生效。虚拟机中除去最开始的一块网卡，再另外添加两块网卡，如下图所示。修改Ubuntu20_x64.vmx里面的配置信息。# 这句需要切换到root用户执行。
f-stack:F-Stack是基于DPDK，FreeBSD TCPIP堆栈和协程API的高性能高性能用户空间网络开发套件。
04-05
F栈 介绍 随着网络接口卡的飞速发展，使用Linux内核处理数据包的不良性能已成为现代网络系统的瓶颈。 但是，随着Internet增长的需求不断增长，需要一种性能更高的网络处理解决方案。 内核旁路技术已经引起越来越多的关注。 有各种类似的技术，例如：DPDK，NETMAP和PF_RING。 内核绕过的主要思想是Linux仅用于处理控制流。 所有数据流都在用户空间中处理。 因此，内核旁路可以避免由于内核数据包复制，线程调度，系统调用和中断而导致的性能瓶颈。 此外，内核旁路可以通过多重优化方法获得更高的性能。 在各种技术中，DPDK被广泛使用，因为它与内核调度和活动社区支持之间的隔离更加彻底。 是基于DPDK的开源高性能网络框架，具有以下特征： 网卡在满负载下可以实现的超高网络性能：1000万个并发连接，500万RPS，100万CPS。 移植FreeBSD 11.01用户空间堆栈，它提供
f-stack和DPDK
最新发布
数字人生
06-05 940
DPDK是一个开源的数据平面开发工具集，允许开发者编写高速的数据包处理应用程序，绕过操作系统内核（kernel bypass），直接在用户空间(user space)处理网络数据包。这显著减少了数据包处理的延迟，提高了网络吞吐量。DPDK通过提供轮询模式的驱动、巨大的页表、内存池等技术，优化了数据包的接收和发送流程。
VMware上配置DPDK环境并运行实例程序
weixin_30486037的博客
07-15 796
1. 在虚拟机VMware上配置环境 VMware安装：http://www.zdfans.com/html/5928.html Ubuntu：https://www.ubuntu.com/download/desktop 为了更好地运行DPDK，可以多虚拟化几块网卡和CPU： 只有一张网卡是运行不了DPDK的，最少要两张。 多一点CPU可以在DPDK的程序中多调度一些逻辑核（lcore） ...
多队列网卡与虚拟化
m0_65931372的博客
09-10 1095
多队列网卡 之前简单介绍过多队列网卡，这里稍微展开一点。 之前介绍过，一个数据包，由某个队列处理，触发指定中断。 当收到报文时，通过 hash 包头的(sip, sport, dip, dport)四元组，将一条流总是收到相同队列，同时触发与该队列绑定的中断。 ls /sys/class/net/eth0/queue 结果 内核对多队列网卡的支持 Linux 内核中，RPS（Receive Packet Steering）在接收端提供了这样的机制。RPS 主要是把软中断的负载均衡到 CPU 的各个 c
dpdk常见错误
a777122的博客
10-29 1002
dpdk常见错误
dpdk编译问题
juewuer的博客
01-30 4982
下载了最新的dpdk dpdk-17.08.1，编译出现一个小问题 [root@test5 dpdk-stable-17.08.1]# make config help No template specified. Use 'make defconfig' or use T=template from the following list: arm-armv7a-linuxapp-gcc
未来10年，5个C/C++吃香的细分领域技术
a410974689的博客
09-02 1438
一、DPDK 简介 DPDK全称Intel Data Plane Development Kit，是intel提供的数据平面开发工具集，为Intel architecture（IA）处理器架构下用户空间高效的数据包处理提供库函数和驱动的支持。通俗地说，就是一个用来进行包数据处理加速的软件库。 DPDK不同于Linux系统以通用性设计为目的，而是专注于网络应用中数据包的高性能处理。具体体现在DPDK应用程序是运行在用户空间上利用自身提供的数据平面库来收发数据包，绕过了Linux内核协议栈对数据包处理过程。它不
DKDP正文一：简单了解原理（10/14）
谢白羽
10-13 566
文章目录一、dkdp安装在vm上二、dkdp的设置1）vmxnet3支持多队列网卡三、补充编译nginx并修改配置1）编译ngxin 一、dkdp安装在vm上 二、dkdp的设置 1）vmxnet3支持多队列网卡 ①etho对应的8个中断传出来，多队列网卡可以分为多个触发，然后分到不同的CPU上面来处理，一个中断触发一个CPU； ②多队列网卡可以绑定多核 示例：ngxin先跑在多核，开8个worker进程，当请求量很多的时候，网卡就会均匀的将请求分布到各个CPU上面，以及由各个进程处理 三、补充编译
解决虚拟机添加网卡但是没有配置文件
njj54188的博客
03-20 3199
打开所创建虚拟机目录下的.vmx文件，找到ethernet0.present = “TRUE”，再其下面添加 ethernet0.virtualDev = “e1000” ，若ethernet0.virtualDev已经存在，则可以把引号内的内容改为e1000即可。 如果带有多个网卡，则依次+1，如 ethernet1.virtualDev = “e1000” ， ethernet2.virtua...
F-Stack Nginx APP Guide
RToax
08-13 737
F-Stack Nginx APP Guide F-Stack is an open source network framework based on DPDK. F-Stack supports standard Nginx as HTTP framework which means all web application based on HTTP can easily use F-Stack. How does Nginx use F-Stack? Nginx APP is in app/nginx
全用户态网络开发套件F-Stack架构分析
~~ LINUX ~~
05-09 2863
F-Stack是一个全用户态（kernel bypass）的高性能的网络接入开发包，基于DPDK、FreeBSD协议栈、微线程接口等，适用于各种需要网络接入的业务，用户只需要关注业务逻辑，简单的接入F-Stack即可实现高性能的网络服务器。 本文介绍F-Stack的详细架构及如何解决内核协议栈面临的问题。 传统内核协议栈的性能瓶颈 在传统的内核协议栈中，网络包处理存在诸多瓶颈，严重影响网络包的收发性能。性能瓶颈主要包括以下几个方面 局部性失效 - 一个数据包的处理可能跨多个CPU核心、缓存失.
使用Intel82599 VF 功能，在虚拟机里运行 （f-stack）nginx 代理功能多进程总结
shaoyunzhe的专栏
06-02 5482
f-stack 官网http://www.f-stack.org/ f-stack是一个移植了freebsd 协议栈和支持dpdk的用户空间协议栈，源码里包含了对nginx的支持。 网卡SRIOVhttp://dpdk.org/doc/guides/nics/intel_vf.html 1、准备工作 使用intel 82599网卡的SRIOV功能开启VF，创建虚拟机直接使用网卡
VMware12安装centos7多网卡无法识别解决办法
comprel的博客
08-09 1899
问题描述：VMware安装完centos7，一张网卡能够正常识别到，但是添加新的网卡，模拟主机多个网卡时， 在linux系统中只有原来的网卡识别到，其余网卡无法识别到解决办法：Vmware虚拟网卡和Linux兼容问题导致驱动无法正常安装，默认的网卡类型不兼容，因此在linux系统中无法识别到虚拟网卡值为”e1000”指定网卡类型为Intel(R) 值为”vlance”指定网卡类型为AMD PCN
DPDK-虚拟机配置网卡多队列
回头太难
09-07 3358
配置网卡多队列 1.设置巨页 sudo vim /etc/default/grub 如果是虚拟机： GRUB_CMDLINE_LINUX改成 GRUB_CMDLINE_LINUX="find_preseed=/preseed.cfg noprompt net.ifnames=0 biosdevname=0 default_hugepagesz=2M hugepagesz=2M hugepages=1024 isolcpus=0-2" 如果是物理机： default_hugepages=
dpdk预备学习环境准备之多队列网卡认识及测试
yun6853992的博客
11-29 3339
dpdk学习预备之多队列网卡环境搭建 dpdk学习预备之环境搭建： 这里使用VMware+ubuntu虚拟机环境 这里涉及到的小知识点： ​ 1：配置多个网卡，并使环境上多个网卡都能生效。 ​ 2：修改虚拟机网卡名称为传统的eth0 ​ 3：多队列网卡的测试 dpdk测试环境是怎样的？ 个人理解：网卡一般接收到数据后会给内核相关内核协议栈，这里dpdk会代替这里的协议栈，接管网卡上的数据，实现定制性开发，对网络性能进行优化与提升。 所以： 1：dpdk要接管一个网卡上的数据，所以我们测试的时候需要专门
CentOS 修改网卡队列长度
vbaspdelphi的专栏
12-18 6150
查看网卡配置 ethtool -g eth1 修改网卡配置 ethtool -G eth1 rx 4096 ethtool -G eth1 tx 4096 这样，对于流量非常重的网卡会稍微好点。具体效果还在观察。[root@localhost ~]# ethtool -g eth1 Ring parameters for eth1: Pre-set maximums: RX: 4096
网卡多队列技术与RSS功能介绍
热门推荐
baidu_24553027的专栏
02-08 2万+
多队列网卡是一种技术，最初是用来解决网络IO QoS （quality of service）问题的，后来随着网络IO的带宽的不断提升，单核CPU不能完全处满足网卡的需求，通过多队列网卡驱动的支持，将各个队列通过中断绑定到不同的核上，以满足网卡的需求。 常见的有Intel的82575、82576，Boardcom的57711等，下面以公司的服务器使用较多的Intel 82575网卡为例，分析一下
f-stack 多队列
05-09
F-stack是一个高性能网络框架，其特点在于能够轻松实现高性能，低延迟的应用程序，而其中的多队列特性更是让它具有出色的表现。 多队列的实现方式是利用不同的队列处理不同的网络连接，从而把网络连接分流到不同的队列中，使得每一个队列都能独立地处理网络连接，从而实现了高效、高吞吐量的网络传输。对于高并发的任务来说，多队列是一个必要的方案，因为它可以充分利用CPU的多核心来执行并行处理，从而加速网络连接的处理速度，降低延迟。 F-stack的多队列功能与其他网络框架比较有几个明显的优势：首先，它利用了DPDK（Data Plane Development Kit）来实现高速数据包的处理，进而将数据包分配到不同队列中去。其次，它支持多种处理方式，包括多线程、多进程、异步I/O等多种方式，这些都能够提供更好的性能，更灵活的解决方案以及更加可靠的网络连接操作。 另外，F-stack的多队列还能够有效地解决应用程序在高并发下遇到的问题。比如，当某个队列的处理能力达到瓶颈时，还可以通过动态分配网络连接的方式，将网络连接分配到其他队列当中去，从而充分利用CPU的多核心来提高应用程序的并发能力。 总的来说，F-stack多队列功能为应对高并发、低延迟的网络传输需求提供了一个非常高效的解决方案，而其采用的多种处理方式以及动态分配功能，也使得它在运行过程中十分稳定、可靠。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

ygmdream

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值