docker3 flanneld网络插件安装 2

CNI网络插件实现pod资源在不通宿主机之前通信
常用的插件
1.flannel 2.calico 3.canal 4.contic 5.opencontrail 6.NSX-T 7.kube-router
安装flannel在7.21/22上
tar -xf flannel-v0.11.0-linux-amd64.tar.gz -C /opt/flannel
拷贝证书 flannel 默认使用etcd 去做一些存储和配置，所以需要用证书连接etcd
scp client.pem 10.4.7.22:/opt/flannel/cert
scp ca.pem 10.4.7.21:/opt/flannel/cert
scp client-key.pem 10.4.7.22:/opt/flannel/cert
创建配置文件编辑环境变量env文件
vi /opt/flannel/subnet.env   21配置
FLANNEL_NETWORK=172.7.0.0/16            #flannel管理的网络地址
FLANNEL_SUBNET=172.7.21.1/24            #宿主机子网地址
FLANNEL_MTU=1500
FLANNEL_IPMASQ=false
vi /opt/flannel/subnet.env   22配置
FLANNEL_NETWORK=172.7.0.0/16            #flannel管理的网络地址
FLANNEL_SUBNET=172.7.22.1/24            #宿主机子网地址
FLANNEL_MTU=1500
FLANNEL_IPMASQ=false                  

创建启动脚本并且eth0信息根据本机网卡信息修改
vi /opt/flannel/flanneld.sh   21配置
#!/bin/bash
./flanneld \
  --public-ip=10.4.7.21 \
  --etcd-endpoints=https://10.4.7.12:2379,https://10.4.7.21:2379,https://10.4.7.22:2379 \
  --etcd-keyfile=./cert/client-key.pem \
  --etcd-certfile=./cert/client.pem \
  --etcd-cafile=./cert/ca.pem \
  --iface=eth0 \
  --subnet-file=./subnet.env \
  --healthz-port=2401
  
vi /opt/flannel/flanneld.sh   22配置
#!/bin/bash
./flanneld \
  --public-ip=10.4.7.22 \
  --etcd-endpoints=https://10.4.7.12:2379,https://10.4.7.21:2379,https://10.4.7.22:2379 \
  --etcd-keyfile=./cert/client-key.pem \
  --etcd-certfile=./cert/client.pem \
  --etcd-cafile=./cert/ca.pem \
  --iface=eth0 \
  --subnet-file=./subnet.env \
  --healthz-port=2401
  
赋权并创建目录
chmod 755 flanneld.sh
mkdir -p /data/logs/flanneld

操作etcd 增加host-gw  
cd /opt/etcd
./etcdctl set /coreos.com/network/config '{"Network": "172.7.0.0/16", "Backend": {"Type": "host-gw"}}'
查看网络模型
./etcdctl get /coreos.com/network/config

创建supervisor启动脚本
vi /etc/supervisord.d/flannel.ini 21配置
[program:flanneld-7-21]
command=/opt/flannel/flanneld.sh                             ; the program (relative uses PATH, can take args)
numprocs=1                                                   ; number of processes copies to start (def 1)
directory=/opt/flannel                                       ; directory to cwd to before exec (def no cwd)
autostart=true                                               ; start at supervisord start (default: true)
autorestart=true                                             ; retstart at unexpected quit (default: true)
startsecs=30                                                 ; number of secs prog must stay running (def. 1)
startretries=3                                               ; max # of serial start failures (default 3)
exitcodes=0,2                                                ; 'expected' exit codes for process (default 0,2)
stopsignal=QUIT                                              ; signal used to kill process (default TERM)
stopwaitsecs=10                                              ; max num secs to wait b4 SIGKILL (default 10)
user=root                                                    ; setuid to this UNIX account to run the program
redirect_stderr=true                                         ; redirect proc stderr to stdout (default false)
stdout_logfile=/data/logs/flanneld/flanneld.stdout.log       ; stderr log path, NONE for none; default AUTO
stdout_logfile_maxbytes=64MB                                 ; max # logfile bytes b4 rotation (default 50MB)
stdout_logfile_backups=4                                     ; # of stdout logfile backups (default 10)
stdout_capture_maxbytes=1MB                                  ; number of bytes in 'capturemode' (default 0)
stdout_events_enabled=false                                  ; emit events on stdout writes (default false)
vi /etc/supervisord.d/flannel.ini 22配置
[program:flanneld-7-21]
command=/opt/flannel/flanneld.sh                             ; the program (relative uses PATH, can take args)
numprocs=1                                                   ; number of processes copies to start (def 1)
directory=/opt/flannel                                       ; directory to cwd to before exec (def no cwd)
autostart=true                                               ; start at supervisord start (default: true)
autorestart=true                                             ; retstart at unexpected quit (default: true)
startsecs=30                                                 ; number of secs prog must stay running (def. 1)
startretries=3                                               ; max # of serial start failures (default 3)
exitcodes=0,2                                                ; 'expected' exit codes for process (default 0,2)
stopsignal=QUIT                                              ; signal used to kill process (default TERM)
stopwaitsecs=10                                              ; max num secs to wait b4 SIGKILL (default 10)
user=root                                                    ; setuid to this UNIX account to run the program
redirect_stderr=true                                         ; redirect proc stderr to stdout (default false)
stdout_logfile=/data/logs/flanneld/flanneld.stdout.log       ; stderr log path, NONE for none; default AUTO
stdout_logfile_maxbytes=64MB                                 ; max # logfile bytes b4 rotation (default 50MB)
stdout_logfile_backups=4                                     ; # of stdout logfile backups (default 10)
stdout_capture_maxbytes=1MB                                  ; number of bytes in 'capturemode' (default 0)
stdout_events_enabled=false                                  ; emit events on stdout writes (default false)
更新supervisor配置
supervisorctl update