老网工的岁月独白

mlnx_qos -i ens1np0 -s ets,ets,ets,ets,ets,ets,strict,strict -t 10,10,10,50,10,10,0,0 设置出向队列调度，tc7，tc6严格优先级，tc0-5按权重轮询。mlnx_qos -i ens1np0 -f 0,0,0,1,0,0,0,0 开启priority 3 pfc。mlnx_qos -i ens1np0 -r 0,0,0,0,0,0,30,20 队列限速。设置队列3 PFC，后面打流测试让RoCEv2流量跑在队列3中，

修改网卡模式为ETH，然后reboot。驱动自带性能测试工具测试网卡性能。选择对应系统版本架构。

全称是Remote Direct Memory Access，即远程直接内存访问，是一种用于高性能网络通信的技术。RDMA技术可以让计算机直接访问远程计算机的内存，而无需在本地和远程计算机之间进行数据复制。相比传统的网络通信方式，RDMA技术具有更低的延迟、更高的带宽和更低的CPU利用率等优点，可以显著提高网络通信的性能和效率。目前支持RDMA的网络协议主要有：InfiniBand（IB）、ROCE、iWARP。

EVE环境模拟搭建一个基于主机VTEP的VXLAN数据中心网络。实验里vtep是在linux主机上，同时linux主机还得有路由功能使VTEP的端点IP可达，所以两台linux服务器需要安装FRR。数据转发平面使用VXLAN封装；在控制平面我打算选择使用EVPN和OVN两种不同方式实现。。

EVE环境模拟搭建一个基于主机VTEP的VXLAN数据中心网络。实验里vtep是在linux主机上，同时linux主机还得有路由功能使VTEP的端点IP可达，所以两台linux服务器需要安装FRR。数据转发平面使用VXLAN封装；在控制平面我打算选择使用EVPN和OVN两种不同方式实现。这次实验控制平面配置了EVPN，OVN放在下次实验里。

EVPN路由的种类比较多，每个类型抓一个包在此留存，以备不时之需。与君共勉。

DCI 端到端互连方案中，WAN-PE只是起到路由传递，和外层数据包转发的作用。相比hand-off，端到端支持了Mac mobility、ARP suppression。

用Arista的veos做了个DCI（hand-off）实验。模拟了VxLAN数据中心hand-off方式做L2互通。在此分享。

另外在VxLAN这样的overlay的网络中，我们必须还要考虑到内外层报文ECN的一致性，例如：Spine链路拥塞时ECN置位也只是在外层报文， 这就要求Leaf到接收端时先要将外层的ECN状态同步到内层报文，然后再剥离外层报文送到接收端侧。最后，很多时候无损网络部署时会将PFC和ECN同时部署，考虑到PFC可能的死锁等问题，一般发生拥塞时会首先触发ECN，使终端主动降速。队列调度：出向时，将不同标记的流量放到不同队列，通常信令类流量绝对优先，ROCEv2和普通流量加权重轮询调度，也就是SP+WRR。

在L2互通、L3互通实验基础上通过NAT实现访问公网。架构图如下，这里两台逻辑路由器LR1和GLR是通过一台逻辑交换机LSjoin互连的，GLR和物理网络设备通过LSlocal相连。

如上一个实验。

尽量少贴概念，只同步一些必要的名词。central: 可以看做中心节点，central节点组件包括OVN/CMS plugin、OVN Northbound DB、ovn-northd、OVN Southbound DB。hypervisor: 可以看做工作节点，hypervisor节点组件包括ovn-controller、ovs-vswitchd、ovsdb-server。（central节点相关组件和hypervisor组件可以运行在同一个物理节点上）

SRv6 Locator TLV除了携带用于指导路由的信息外，IS-IS协议发布的SID如果不关联IS-IS邻居，则都在。IS-IS协议的另一个功能就是将SRv6 SID信息和SID对应的SRv6 Endpoint节点行为信息通过IS-IS协议的各类SID Sub-TLV扩散出去，用于路径/业务编程单元对网络进行编程。IS-IS协议通过两个TLV来发布Locator的路由信息:SRv6 Locator TLV和IPv6 Prefix Reachability TLV，这两个TLV具有不同的作用。

iptables的底层实现是netfilter。netfilter实在Linux内核2.4版引入的子系统，作为通用框架提供一套hook函数的管理机制，使得数据包过滤、地址转换、访问控制、连接跟踪等功能得以实现。netfilter的架构就是在整个网络流程中放置了一些钩子，并在钩子上挂载一些函数进行处理。下面是一张netfilter的原理图。

PE2使用VPN SID 4::100查找本地SID表，命中了End.DT4 SID, PE2执行End.DT4 SID的指令，解封装报文，去掉SRH信息和IPv6报文头，使用内层报文的目的地址查找VPN SID 4::100对应的VPN实例路由表，然后将报文转发给CE2。报文到达PE2之后，PE2使用报文的IPv6目的地址4::1查找本地SID表，命中了End SID，所以PE2将报文的SL值减1，将IPv6 DA更新为VPN SID 4::100。P1和P2节点根据SRH信息逐跳转发。

节点F执行End.DT4 SID的指令动作，解封装报文，去除IPv6报文头，再将内层IPv4报文在End.DT4 SID绑定的VPN实例的IPv4路由表中进行查表转发，最终将报文发送给主机H2。节点D执行End.X SID的指令动作，将SL的值减1，并将SL指示的SID更新到外层IPv6报文头的目的地址字段，当报文到达节点C后，节点C只支持处理IPv6报文头，无法识别SRH，此时节点C按照正常的IPv6报文处理流程，按照最长匹配原则查找IPv6路由表，将报文转发给当前的目的地址所代表的节点D。

10.0.0.112 到 10.0.0.11 ICMP request，目的MAC a002，enp0s9进。10.0.0.11 到 10.0.0.112 ICMP replay，源MAC a002，enp0s9出。从H2-ns1和H2-ns2 ping H1，,nload 查看H1 bond0负载情况，H1 服务器接口的MAC地址,bond0的Mac地址会继承一个物理接口的Mac。负载通过arp实现，对不同的远端设备arp 请求，响应不同的mac。通过不同的物理口发包，实现负载。

用docker搭建了一个FRR evpn vxlan的实验相比手动配置vxlan隧道端点，利用FRR起个evpn作为控制面可以自动发现隧道端点。这里的FRR是Linux和Unix平台的IP路由协议套件，其中 包括BGP，IS-IS，LDP，OSPF，PIM和RIP的协议守护程序。熟悉网络的朋友们不要和快速重路由搞混了。

ns1—host71—物理网络—host72—ns1配置host71：//新建ovs 交换机br-tunovs-vsctl add-br br-tunovs-vsctl add-port br-tun vxlan0 – set interface vxlan0 type=vxlan options:remote_ip=192.168.181.72 options:key=100//新建一对vethip link add veth1-0 type peer name veth1-1//新建一个n

今天主要想聊一聊VXLAN环境中终端设备（Linux系统）的接入方式，在VXLAN组网中，终端一般会双上联到两台Leaf以增强组网的健壮性，我们先看Mode 1，下面是从官方网站对Mode 1的解释和fail_over_mac 这个参数的意思，会在配置时用到。Mode 1之所以不需要对端交换机配合，是因为Bond的成员口其实只有一个处于活跃状态，并且对外发布这个活跃接口的MAC地址，如果当前的活跃接口故障，那么另一个接口接替工作，同时Bond的MAC地址也发生了变化。..................