dpdk+ovs安装和编译（一）

最新推荐文章于 2024-09-10 10:55:58 发布
最新推荐文章于 2024-09-10 10:55:58 发布
阅读量5.4k 收藏
点赞数
分类专栏： DPDK linux c++ 文章标签： c/c++ 虚拟机 c++ vpp dpdk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lingshengxiyou/article/details/130035289
版权
本文介绍了在华为鲲鹏920服务器上安装DPDK 19.11和Open vSwitch (OVS)时遇到的版本不匹配问题。在尝试编译OVS 2.13.1时发现需要DPDK 2.13对应的版本，同时，文章提到了服务器中网卡与DPDK绑定失败的问题。解决方案包括更新Python版本、修改配置文件并重新编译OVS，以及处理智能网卡的Representors。此外，还涉及到了DPDK representors的概念和配置方法。
摘要由CSDN通过智能技术生成 

绑定前网卡驱动

[root@localhost ~]# ethtool -i  enp5s0
driver: hinic
version: 
firmware-version: 
expansion-rom-version: 
bus-info: 0000:05:00.0
supports-statistics: no
supports-test: no
supports-eeprom-access: no
supports-register-dump: no
supports-priv-flags: no
[root@localhost ~]#

安装ovs遇到一个问题那就是ovs version和dpdk version不匹配，华为鲲鹏920上安装的dpdk是dpdk-19.11 ​

ovs-vsctl add-br br0 -- set bridge br0 datapath_type=netdev

[root@localhost ~]# ovs-vsctl add-port br0 dpdk1 -- set Interface dpdk1 type=dpdk options:dpdk-devargs=0000:05:00.0
ovs-vsctl: Error detected while setting up 'dpdk1': could not open network device dpdk1 (Address family not supported by protocol). See ovs-vswitchd log for details.
ovs-vsctl: The default log directory is "/var/log/openvswitch".
[root@localhost ~]# ovs-vsctl show
bb6aa323-f96b-4872-98f8-7aa87fc99958
Bridge "br0"
datapath_type: netdev
Port "dpdk1"
Interface "dpdk1"
type: dpdk
options: {dpdk-devargs="0000:05:00.0"}
error: "could not open network device dpdk1 (Address family not supported by protocol)"
Port "br0"
Interface "br0"
type: internal
[root@localhost ~]#

​

 查看网卡与dpdk绑定状态

​

[root@localhost dpdk-19.11]# ./usertools/dpdk-devbind.py   --status

Network devices using DPDK-compatible driver
============================================
0000:05:00.0 'Hi1822 Family (2*25GE) 0200' drv=vfio-pci unused=hinic
0000:06:00.0 'Hi1822 Family (2*25GE) 0200' drv=vfio-pci unused=hinic

Network devices using kernel driver
===================================
0000:7d:00.0 'HNS GE/10GE/25GE RDMA Network Controller a222' if=enp125s0f0 drv=hns3 unused=hns_roce_hw_v2,vfio-pci *Active*
0000:7d:00.1 'HNS GE/10GE/25GE Network Controller a221' if=enp125s0f1 drv=hns3 unused=vfio-pci 
0000:7d:00.2 'HNS GE/10GE/25GE RDMA Network Controller a222' if=enp125s0f2 drv=hns3 unused=hns_roce_hw_v2,vfio-pci 
0000:7d:00.3 'HNS GE/10GE/25GE Network Controller a221' if=enp125s0f3 drv=hns3 unused=vfio-pci 

No 'Baseband' devices detected
==============================

No 'Crypto' devices detected
============================

No 'Eventdev' devices detected
==============================

No 'Mempool' devices detected
=============================

No 'Compress' devices detected
==============================

No 'Misc (rawdev)' devices detected
===================================
[root@localhost dpdk-19.11]#

​

 编译dpdk

​

修改配置文件config/common_linuxapp，这里我们测试vhost模式，所以需要把下面两个配置项，配置为yes。


CONFIG_RTE_BUILD_COMBINE_LIBS=y
CONFIG_RTE_LIBRTE_VHOST=y

[root@localhost dpdk-19.11]# grep -n CONFIG_RTE_LIBRTE_VHOST config/common_base
1030:CONFIG_RTE_LIBRTE_VHOST=y
1031:CONFIG_RTE_LIBRTE_VHOST_NUMA=n
1032:CONFIG_RTE_LIBRTE_VHOST_DEBUG=n

 

 
 
​
 

 

 

 
 
 
  
  ​ 
 
 

 

[root@localhost dpdk-19.11]# mkdir -p /usr/src/dpdk
[root@localhost dpdk-19.11]# make install T=arm64-armv8a-linuxapp-gcc  DESTDIR=/usr/src/dpdk -j 64

将dpdk安装到当前系统
make install T=arm64-armv8a-linuxapp-gcc  DESTDIR=/usr -j 64

安装完成后可以使用dpdk的命令了
 

[root@localhost ~]# dpdk-devbind --status
 

 

Network devices using DPDK-compatible driver
 ============================================
 0000:05:00.0 'Hi1822 Family (2*25GE) 0200' drv=vfio-pci unused=hinic
 0000:06:00.0 'Hi1822 Family (2*25GE) 0200' drv=vfio-pci unused=hinic
 

 

Network devices using kernel driver
 ===================================
 0000:7d:00.0 'HNS GE/10GE/25GE RDMA Network Controller a222' if=enp125s0f0 drv=hns3 unused=hns_roce_hw_v2,vfio-pci *Active*
 0000:7d:00.1 'HNS GE/10GE/25GE Network Controller a221' if=enp125s0f1 drv=hns3 unused=vfio-pci
 0000:7d:00.2 'HNS GE/10GE/25GE RDMA Network Controller a222' if=enp125s0f2 drv=hns3 unused=hns_roce_hw_v2,vfio-pci
 0000:7d:00.3 'HNS GE/10GE/25GE Network Controller a221' if=enp125s0f3 drv=hns3 unused=vfio-pci
 

 

No 'Baseband' devices detected
 ==============================
 

 

No 'Crypto' devices detected
 ============================
 

 

No 'Eventdev' devices detected
 ==============================
 

 

No 'Mempool' devices detected
 =============================
 

 

No 'Compress' devices detected
 ==============================
 

 

No 'Misc (rawdev)' devices detected
 ===================================
 

 

[root@localhost ~]# cd /usr/
 [root@localhost usr]# find ./ -name dpdk*
 ./sbin/dpdk-devbind
 ./bin/dpdk-test-compress-perf
 ./bin/dpdk-pdump
 ./bin/dpdk-test-crypto-perf
 ./bin/dpdk-pmdinfo
 ./bin/dpdk-test-eventdev
 ./bin/dpdk-procinfo
 ./src/dpdk
 ./src/dpdk/sbin/dpdk-devbind
 ./src/dpdk/bin/dpdk-test-compress-perf
 ./src/dpdk/bin/dpdk-pdump
 ./src/dpdk/bin/dpdk-test-crypto-perf
 ./src/dpdk/bin/dpdk-pmdinfo
 ./src/dpdk/bin/dpdk-test-eventdev
 ./src/dpdk/bin/dpdk-procinfo
 ./src/dpdk/lib/modules/4.14.0-115.el7a.0.1.aarch64/extra/dpdk
 ./src/dpdk/include/dpdk
 ./src/dpdk/share/dpdk
 ./src/dpdk/share/dpdk/usertools/dpdk-pmdinfo.py
 ./src/dpdk/share/dpdk/usertools/dpdk-devbind.py
 ./src/dpdk/share/dpdk/usertools/dpdk-telemetry-client.py
 ./src/dpdk/share/dpdk/usertools/dpdk-setup.sh
 ./src/dpdk/share/dpdk/arm64-armv8a-linuxapp-gcc/app/dpdk-pmdinfogen
 ./lib/modules/4.14.0-115.el7a.0.1.aarch64/extra/dpdk
 ./include/dpdk
 ./share/dpdk
 ./share/dpdk/usertools/dpdk-pmdinfo.py
 ./share/dpdk/usertools/dpdk-devbind.py
 ./share/dpdk/usertools/dpdk-telemetry-client.py
 ./share/dpdk/usertools/dpdk-setup.sh
 ./share/dpdk/arm64-armv8a-linuxapp-gcc/app/dpdk-pmdinfogen
[root@localhost usr]# dpdk-devbind -u 0000:05:00.0 0000:06:00.0
 

 

 
 
​
 

 

 
 
​
 

 

 

 

编译ovs
 

[root@localhost data1]#  mkdir -p ~/rpmbuild/SOURCES 
 
[root@localhost data1]#  cp openvswitch-2.13.1 ~/rpmbuild/SOURCES/ -r
[root@localhost data1]# 
 

 

 
 
​
 

 

[root@localhost SOURCES]# python3 -m pip install --upgrade pip
Collecting pip
  Downloading pip-20.3.3-py2.py3-none-any.whl (1.5 MB)
     |████████████████████████████████| 1.5 MB 5.9 MB/s 
Installing collected packages: pip
  Attempting uninstall: pip
    Found existing installation: pip 20.2.4
    Uninstalling pip-20.2.4:
      Successfully uninstalled pip-20.2.4
Successfully installed pip-20.3.3
[root@localhost SOURCES]#  pip3 install sphinx -i https://pypi.tuna.tsinghua.edu.cn/simpl
 

 
 
​
 

 

 

 

 无法安装openvswitch-2.13.1-1
 

 

[root@localhost SOURCES]# rpmbuild -bb --without check openvswitch-2.13.1/rhel/openvswitch.spec
error: Failed build dependencies:
        python3-sphinx is needed by openvswitch-2.13.1-1.aarch64
        unwind-devel is needed by openvswitch-2.13.1-1.aarch64
 

 

 

 
 
 
  
  ​ 
 
 

 

 

 
 
​
 

 

[root@localhost openvswitch-2.12.0]# ls
acinclude.m4  config.log        Documentation    Makefile     ovsdb       tests                windows
aclocal.m4    config.status     include          Makefile.am  package.m4  third-party          xenserver
appveyor.yml  configure         ipsec            Makefile.in  poc         tutorial
AUTHORS.rst   configure.ac      lib              manpages.mk  python      utilities
boot.sh       CONTRIBUTING.rst  libtool          NEWS         README.rst  Vagrantfile
build-aux     datapath          LICENSE          NOTICE       rhel        Vagrantfile-FreeBSD
config.h      datapath-windows  m4               ofproto      selinux     vswitchd
config.h.in   debian            MAINTAINERS.rst  ovn          stamp-h1    vtep
[root@localhost openvswitch-2.12.0]# ./configure --with-dpdk=/usr/src/dpdk --prefix=/usr --sysconfdir=/etc --localstatedir=/var
 

 
 
​
 

 

[root@localhost SOURCES]# pwd
/root/rpmbuild/SOURCES
[root@localhost SOURCES]# rpmbuild -bb --without check openvswitch-2.12.0/rhel/openvswitch.spec
 

 
 
​
 

 

 


​
 

[root@localhost ~]# ls /etc/openvswitch/
 system-id.conf
 

[root@localhost ~]# ovsdb-tool create /etc/openvswitch/conf.db /usr/share/openvswitch/vswitch.ovsschema
[root@localhost ~]#  ls /etc/openvswitch/
conf.db  system-id.conf
[root@localhost ~]# ​
 

 ovs启动 ：
 

 ovs.sh​
 

#启动ovsdb server
ovsdb-server /etc/openvswitch/conf.db \
-vconsole:emer -vsyslog:err -vfile:info \
--remote=punix:/var/run/openvswitch/db.sock \
--private-key=db:Open_vSwitch,SSL,private_key \
--certificate=db:Open_vSwitch,SSL,certificate \
--bootstrap-ca-cert=db:Open_vSwitch,SSL,ca_cert --no-chdir \
--log-file=/var/log/openvswitch/ovsdb-server.log \
--pidfile=/var/run/openvswitch/ovsdb-server.pid \
--detach --monitor

#第一次启动ovs需要初始化
ovs-vsctl --no-wait init
#从ovs-v2.7.0开始，开启dpdk功能已不是vswitchd进程启动时指定–dpdk等参数了，而是通过设置ovsdb来开启dpdk功能

ovs-vsctl -

                

        

        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  lingshengxiyou
                
              
            

            

                关注
              
            

        

        

          
      

      

            

                专栏目录
          









                



	

		

			

				
					
ovs-dpdk 编译和配置

				
			

			

				

					lingshengxiyou的博客
				

				

					01-04
					
					333
					
				

			

		

		

			
				
ovs-dpdk 编译参考网站地址使用的方式是 vm 用 virtio ，用户态用 dpdk的 librte_vhost 接口。

			
		

	



                

            
              



	

		

			

				
					
dpdk和ovs

				
			

			

				

					weixin_42753043的博客
				

				

					04-24
					
					1717
					
				

			

		

		

			
				
dpdk和ovs
（仅作为个人笔记，如有雷同，请联系删除。。）
 
dpdk：
  dpdk：数据包处理加速软件库。主要分为4个模块：
   1、核心库Core libs：提供抽象、大页内存、缓存池、定时器、无锁环等基础组件。
   2、PMD库：提供全用户态的驱动，以便通过轮询和线程绑定得到极高的网络吞吐，支持各类本地和虚拟的网卡。
   3、Classify库：支持精确匹配[Exact Match]、最长匹配[LPM] 和 通配符匹配[ACL]，提供常用包处理的查表操作。
   4、QoS库：提供网络服

			
		

	



              


  
              

                


	

		

			

				
					
ovs + dpdk版本说明

				
			

			

				

					anzhuangguai的专栏
				

				

					07-26
					
					1467
					
				

			

		

		

			
				
http://openvswitch.org/pipermail/dev/2016-April/069439.html





What should work is:

OVS-2.5 + DPDK 2.2

OVS-Master + DPDK 16.04 (soon 16.07 after dpdk release and patches into OVS are acc

			
		

	





	

		

			

				
					
DPDK 测试说明

				
			

			

				

					墨染锦年的博客
				

				

					09-10
					
					777
					
				

			

		

		

			
				
通过 DPDK 提供的 Python 脚本 dpdk-devbind 来完成， 当执行 dpdk-devbind 来 bind 网卡时，会通过 sysfs 与内核交互、让内核使用指定的驱动程序(e.g. igb_uio) 来绑定网卡。b、 配置驱动，让其支持新的 PCI 设备，向 /sys/bus/pci/drivers/igb_uio/new_id 写入要bind的网卡设备的 PCI ID (e.g. 8086 10f5, 格式：设备厂商号 设备号)。而不是”网络设备”、不是”压缩设备”？

			
		

	



		

			
		



	

		

			

				
					
ovs with dpdk编译

				
			

			

				

					MYzhutao的博客
				

				

					03-02
					
					2342
					
				

			

		

		

			
				
参考：ovs+dpdk简单实践、ovs intro
测试环境ubuntu18.04.3
1. 卸载系统中已经有的ovs
  apt remove openvswitch-switch openvswitch-common

2. 编译dpdk
export RTE_TARGET=x86_64-native-linuxapp-gcc;export RTE_SDK=`pwd`;
make -j 70 ...

			
		

	





	

		

			

				
					
Ovs+Dpdk简单实践

				
			

			

				

					hanyingzhong的专栏
				

				

					11-01
					
					3485
					
				

			

		

		

			
				
Ovs+Dpdk简单实践 
SDNLAB君
•16-04-20 •4557 人围观



一、Dpdk简介
Dpdk是X86平台报文快速处理的库和驱动的集合，不是网络协议栈，不提供二层，三层转发功能，不具备防火墙ACL功能，但通过DPDK可以轻松的开发出上述功能。优势在于通过Dpdk，可以将用户态的数据，不经过内核直接转发到网卡，实现加速目的。主要架构如图1.1所示。在intel的大

			
		

	





	

		

			

				
					
DPDK+OVS+QEMU搭建vhost-user实验环境

				
			

			

				

					少阁主的专栏
				

				

					09-22
					
					4136
					
				

			

		

		

			
				
vhost-user

			
		

	





	

		

			

				
					
非一般测试性dpdk+ovs的实战文档

				
			

			

				

					weixin_44157323的博客
				

				

					07-05
					
					964
					
				

			

		

		

			
				
实战ovs应用dpdk（非一般测试性文档）
早就想写这个了，一直没机会写，终于决定找点时间把事干了，在实习的时候被要求做dpdk对neutron的应用，网上找了很多资料，说句实话博客上的知识基本都是互相抄的，100个人只有一两个是真的原创，其他人都是粘贴复制。dpdk，neutron，ovs的文档多如牛毛，而且几乎全是自己做的一些简单测试，根本不具有实战性，我也不知道是不是实战性的各个公司都不让拿...

			
		

	





	

		

			

				
					
centos7下ovs-dpdk安装指导

				
			

			

				

					jerryduren_2016的博客
				

				

					03-23
					
					1271
					
				

			

		

		

			
				
centos7下ovs-dpdk安装指导总结

			
		

	





	

		

			

				
					
ovs + dpdk编译运行

				
			

			

				

					glovej的博客
				

				

					12-01
					
					1472
					
				

			

		

		

			
				
1. 准备Centos7.3环境，下载ovs的源码包，以2.7.3为例

http://openvswitch.org/releases/openvswitch-2.7.3.tar.gz

最好先确保内核态版本可以编译通过，具体可参考http://docs.openvswitch.org/en/latest/intro/install/general/

基本上就是./congirue ,make...

			
		

	





	

		

			

				
					
OVS DPDK--介绍（一）

				
			

			

				

					bob的博客
				

				

					05-28
					
					4918
					
				

			

		

		

			
				
DPDK简介
DPDK是X86平台报文快速处理的库和驱动的集合，不是网络协议栈，不提供二层，三层转发功能，不具备防火墙ACL功能，但通过DPDK可以轻松的开发出上述功能。
DPDK的优势在于，可以将用户态的数据，不经过内核直接转发到网卡，实现加速目的。主要架构如图所示：

传统的socket方式与DPDK对比：

DPDK关键技术点：

使用大页缓存支持来提高内存访问效率。
利用UIO支持，提供应用空间下驱动程序的支持，也就是说网卡驱动是运行在用户空间的，减小了报文在用户空间和应用空间的多次拷贝。
利用LI

			
		

	





	

		

			

				
					
ovsdos_dpdk:OvSS与DPDK对抗OvS

				
			

			

				

					03-30
				

			

		

		

			
				
ovsdos_dpdk
 OvSS与DPDK对抗OvS

			
		

	





	

		

			

				
					
dpdk编译安装

				
			

			

				

					weixin_34080903的博客
				

				

					12-19
					
					93
					
				

			

		

		

			
				
2019独角兽企业重金招聘Python工程师标准>>>   
                                        
         ...

			
		

	





	

		

			

				
					
DPDK：编译安装

				
			

			

				

					hhd1988的专栏
				

				

					06-14
					
					1289
					
				

			

		

		

			
				
DPDK：编译安装

			
		

	





	

		

			

				
					
一、ovs-dpdk ——安装配置

				
			

			

				

					doujiangbear的博客
				

				

					01-18
					
					2185
					
				

			

		

		

			
				
转载请注明出处，谢谢

a、安装方式

  目前安装ovs-dpdk的方式有两种：

meson安装dpdk，再使用make安装ovs-dpdk
  2、使用meson ninja 安装dpdk请参考另一篇 meson ninja调试dpdk

b、安装ovs：

下载完对应dpdk版本的ovs进行解压；

 进入ovs目录

 ./boot.sh 检查依赖是否完整，不完整先下载依赖

http://www.openvswitch.org/support/ovscon...

			
		

	





	

		

			

				
					
DPDK 编译安装（meson ninja）

				
			

			

				

					shaoyunzhe的专栏
				

				

					03-27
					
					4378
					
				

			

		

		

			
				
dpdk

			
		

	





	

		

			

				
					
ovs3.1.2+dpdk22.11.3配合使用

				
			

			

				

					qq_38989779的博客
				

				

					09-17
					
					462
					
				

			

		

		

			
				
第三步：执行命令./configure CPPFLAGS="-I /include -I /usr/include" --prefix=/usr/ --sysconfdir=/etc --localstatedir=/var --libdir=/usr/lib64 --enable-ssl --enable-shared --with-dpdk=shared，如果可以通过，那么就可以进入make阶段。pkg-config --modversion libdpdk，该命令正常会打印dpdk版本。

			
		

	





	

		

			

				
					
DPDK — 安装部署

				
			

			

				

					kobe24fgy的博客
				

				

					01-04
					
					8189
					
				

			

		

		

			
				
1、基础环境
1.1、硬件配置

1.2、操作系统要求

2、测试环境编译测试过程
2.1、升级GCC版本至GCC-7.3.0
步骤1 升级GCC依赖包设置
########## 编译安装gmp ###########
cd /home

tar -xvf /home/gmp-6.1.2.tar.bz2

cd /home/gmp-6.1.2

./configure --prefix=/usr/local/gmp-6.1.2

make

make install


########## 编译安装mpf

			
		

	





	

		

			

				
					
基于DPDK的OVS安装与配置

					
热门推荐

				
			

			

				

					云云生息的专栏
				

				

					06-09
					
					1万+
					
				

			

		

		

			
				
本文主要描述一下ovs和dpdk如何安装，与简单的配置。

			
		

	





	

		

			

				
					
./mucse_net_update_tool_1.0.1_aarch64 -d enp6s0f0 -dump0 | grep -a 'sn:' | awk '{print $2}'如何匹配指定内容的下一行

					
最新发布

				
			

			

				

					09-26
				

			

		

		

			
				
这个命令是在Linux环境下使用的，它通过`./mucse_net_update_tool_1.0.1_aarch64`工具对网卡enp6s0f0进行操作，并将结果管道到`grep`命令中，过滤出包含'sn:'的部分。然后，`awk`命令进一步处理这些结果，打印出第二列的内容。

具体来说，`grep -a 'sn:'`的作用是查找包含'sn:'字符串的行，并保留所有行（包括详细信息），因为`-a`选项表示"all"，即不分大小写地匹配并显示整个行。`awk '{print $2}'`则是在grep的结果中选择每行的第二列（默认从0开始计数，所以$2指第二列）并打印出来。

如果想要获取的是匹配'sn:'后的下一行内容，可以稍微调整命令顺序，先使用`tail -n +2`跳过第一行（grep的结果的第一行通常不是纯的'sn:'，而是包含了'sn:'的完整行），然后再使用上述awk命令提取第二行：

```bash
./mucse_net_update_tool_1.0.1_aarch64 -d enp6s0f0 -dump0 | tail -n +2 | grep 'sn:' | awk '{print $2}'
```

这里假设grep匹配到了不止一行，并且'sn:'总是在下一行紧跟其后。如果实际情况有所不同，可能需要根据实际内容来调整匹配策略。

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值