企业运维实战--k8s学习笔记4.k8s网络通信、Flannel vxlan模式简介、calico网络插件替换、网络策略范例总结

---

一、k8s网络通信简介（重点）

k8s是通过CNI接口接入插件来实现网络通讯的。目前较为流行的插件有flannel、calico等。
插件存放位置在/etc/cni/net.d/，因此更改、重置网络插件都需要将这个目录下的文件清空。

插件主要工作解决方案如下：
1.多个容器共用一个虚拟网卡，使用虚拟网桥和虚拟网卡进行通信。
2.多个容器共用一个物理网卡进行通信，在二层使用Mac地址。
3.一个物理网卡可以虚拟机出多个接口，硬件交换的方式实现，此方法性能最优，但是成本也高。

主要通信包括：
容器间通信：同一个pod内的容器通过回环接口实现。

pod之间的通信，分为同一节点之间的pod和不同节点之间的pod：
同一节点之间的pod通过cni网桥转发数据包，实现pod-ip访问pod-ip。
不同结点之间的pod通过网络插件支持。

pod与service间的通信：
想要pod-ip去访问Cluster-ip，实质上Cluster-ip是通过iptables和ipvs虚拟出来的ip，不影响pod访问。
同样，ipvs也无法代替iptables，因为ipvs只能做负载均衡为iptables减缓刷新压力，真正的nat转换是通过iptables实现的。

pod和外网通信：iptables的MASQUERADE。

Service与集群外部客户端的通信：（ingress、nodeport、loadbalancer）。

二、Flannel vxlan模式简介

Flannel vxlan模式跨主机通信原理简介

概念了解：

VXLAN
即Virtual Extensible LAN（虚拟可扩展局域网），是Linux本身支持的一网种网络虚拟化技术。
VXLAN可以完全在内核态实现封装和解封装工作，从而通过“隧道”机制，构建出覆盖网络（Overlay Network）。

VTEP：VXLAN Tunnel End Point（虚拟隧道端点），
在Flannel中 VNI的默认值是1，这也是为什么宿主机的VTEP设备都叫flannel.1的原因。

Cni0: 网桥设备，每创建一个pod都会创建一对 veth pair。
其中一端是pod中的eth0，另一端是Cni0网桥中的端口（网卡）。

Flannel.1: TUN设备(虚拟网卡)，用来进行 vxlan 报文的处理（封包和解包）。
不同node之间的pod数据流量都从overlay设备以隧道的形式发送到对端。

Flanneld：flannel在每个主机中运行flanneld作为agent，它会为所在主机从集群的网络地址空间中，获取一个小的网段subnet，本主机内所有容器的IP地址都将从中分配。
同时Flanneld监听K8s集群数据库，为flannel.1设备提供封装数据时必要的mac、ip等网络数据信息。

原理图：

DR模式实现

flannel支持多种后端，包括
vxlan默认报文封装模式，适用于跨网段通信
Directrouting直连路由模式，适用于同网段通信。表现为host-gw，主机网关，性能好，但只能在二层网络中，不支持跨网。

修改前查看node节点网关：

修改kube-flannel配置文件，将type改为直连模式

kubectl -n kube-system get cm
kubectl -n kube-system edit cm kube-flannel-cfg

net-conf.json: |
    {