四、flannel安装

Flannel默认有几种工作模式：
• udp - 默认
• vxlan
• host-gw
• aws
• gce
• alloc
[img]http://dl2.iteye.com/upload/attachment/0119/8217/e4c2bc5b-a733-3ee0-9787-bb3568e369d1.png[/img]
• 容器网卡通过docker0桥接到flannel0网卡，而每个host对应的flannel0网段为 10.1.x.[1-255]/24，而flannel所组成的一个跨host的网段为10.1.x.x/16，而flannel0则为flanneld 进程虚拟出来的网卡。
• docker0的地址是由 /run/flannel/subnet.env 的 FLANNEL_SUBNET 参数决定的

[size=large]HostA的Container(cache1)和HostB的Container(backend2)如何通信[/size]
1. host A的container1请求host B的container2的的数据时，流程如下： 根据host A的路由规则 "10.1.15.0 0.0.0.0 255.255.255.0 U 0 0 0 docker0“ 数据交给docker0处理。
2. docker0会收到数据，然后根据路由规则 ”10.1.0.0 0.0.0.0 255.255.0.0 U 0 0 0 flannel0" 数据被交由给flannel0网卡处理。 flanneld会把数据封包然后送给eth0，用udp协议发送到对方host的eth0网卡。
3. host B的 eth0网卡收到后，根据路由规则 10.1.0.0 0.0.0.0 255.255.0.0 U 0 0 0 flannel0" 则交给flannel0网卡处理。
4. flanneld会把数据解包，根据路由规则 “10.1.20.0 0.0.0.0 255.255.255.0 U 0 0 0 docker0" 交给docker0处理。
5. 则host B的container 2 将会收到数据。
至此网路通信解释完毕。


[size=large]1. 安装依赖[/size]

# yum install bridge-utils

[size=large]2. 配置Flannel（etcd服务器）[/size]

# etcdctl -C http://etcd:4001 set /coreos.com/network/config '{ "Network": "10.1.0.0/16" }'

[size=large]3. 安装flannel（所有node服务器）[/size]

# curl -L https://github.com/coreos/flannel/releases/download/v0.6.1/flannel-v0.6.1-linux-amd64.tar.gz -o flannel-v0.6.1-linux-amd64.tar.gz
# tar zxvf flannel-v0.6.1-linux-amd64.tar.gz
# cd flannel-0.6.1
# cp flannel /usr/bin/

[size=large]4. 启动Flanneld[/size]

# flanneld -etcd-endpoints=http://etcd:4001 -iface=enp0s8 >> /data/logs/flanneld.log 2>&1 &

参数说明
-iface=enp0s8 指定使用的网卡

[size=large]5. 配置Docker的启动参数[/size]

# iptables -t nat -F 
# ifconfig docker0 down 
# brctl delbr docker0

[size=large]6. 重启Docker[/size]

# source /run/flannel/subnet.env 

# docker daemon --exec-opt native.cgroupdriver=systemd -H unix:///var/run/docker.sock -H tcp://0.0.0.0:2375 --bip=${FLANNEL_SUBNET} --mtu=${FLANNEL_MTU} >> /data/logs/docker.log 2>&1 &

[size=large]
7. 验证[/size]
首先查看Flannel是否启动正确；Flannel启动后增加如下路由规则

# route -n

[img]http://dl2.iteye.com/upload/attachment/0119/8219/d51b5f34-15dd-3c63-8546-0831e517f0f9.png[/img]

在node1，node2的机器上，各自启动一个docker，查看IP地址并通信

# docker run -t -i --name=peer centos

[img]http://dl2.iteye.com/upload/attachment/0119/8221/bc3bff1a-fcac-3029-9b42-4ae2674d4aa5.png[/img]
[img]http://dl2.iteye.com/upload/attachment/0119/8223/7d8f49bc-19f6-37b7-bd41-38cb8ecfb49c.png[/img]
在node2的容器ping
[img]http://dl2.iteye.com/upload/attachment/0119/8225/240913e1-83c2-3798-bf0d-318cb3475bac.png[/img]
跨主机容器之间网络已经能通了

[size=large]8. 开机启动[/size]
执行从kubernetes的安装文件中脚本
kubernetes-1.3.5/cluster/centos/node/scripts
[img]http://dl2.iteye.com/upload/attachment/0119/8227/5b32ef27-8fc8-3201-ae7a-ea59cf5b48c0.png[/img]

# sh docker.sh
# sh flannel.sh

生成/usr/lib/systemd/system/docker.service和/opt/kubernetes/cfg/docker
生成/usr/lib/systemd/system/flannel.service和/opt/kubernetes/cfg/flannel

# cp –r kubernetes-1.3.5/cluster/centos/node/bin/* /opt/kubernetes/bin

[img]http://dl2.iteye.com/upload/attachment/0119/8229/bf7c81c8-c16f-3274-aeda-8c57b4286bc0.png[/img]
注意，需要注释掉sh flannel.sh最下方的执行
[img]http://dl2.iteye.com/upload/attachment/0119/8231/4bd3298c-c234-3153-9d58-21f05e9f96e2.png[/img]