【kubernetes 系列1】基于kubernetes构建Docker集群环境

基础知识：

kubernetes是google公司基于docker所做的一个分布式集群，有以下组件组成

etcd: 高可用存储共享配置和服务发现，作为与minion机器上的flannel配套使用，作用是使每台 minion上运行的docker拥有不同的ip段，最终目的是使不同minion上正在运行的docker containner都有一个与别的任意一个containner（别的minion上运行的docker containner）不一样的IP地址。

flannel: 网络结构支持

kube-apiserver: 不论通过kubectl还是使用remote api 直接控制，都要经过apiserver

kube-controller-manager: 对replication controller, endpoints controller, namespace controller, and serviceaccounts controller的循环控制，与kube-apiserver交互，保证这些controller工作

kube-scheduler: Kubernetes scheduler的作用就是根据特定的调度算法将pod调度到指定的工作节点（minion）上，这一过程也叫绑定（bind)

kubelet: Kubelet运行在Kubernetes Minion Node上. 它是container agent的逻辑继任者

kube-proxy: kube-proxy是kubernetes 里运行在minion节点上的一个组件, 它起的作用是一个服务代理的角色

1、系统架构图： 

2、业务场景架构图

图为GIT+Jenkins+Kubernetes+Docker+Etcd+confd+Nginx+Glusterfs架构：

环境：

centos7系统机器三台：
10.18.18.16    ukr_server1    用来安装kubernetes master
10.18.18.7    ukr_server2    用作kubernetes minion （minion1）
10.18.19.8    ukr_server3    用作kubbernetes minion (minion2)

 
一、关闭系统运行的防火墙及selinux

1。如果系统开启了防火墙则按如下步骤关闭防火墙（所有机器）

systemctl stop firewalld 
systemctl disable firewalld

2.关闭selinux

setenforce 0
sed -i '/^SELINUX=/cSELINUX=disabled' /etc/sysconfig/selinux

二、MASTER安装配置

1. 安装并配置Kubernetes master(yum 方式)

yum -y install etcd kubernetes-master flannel

2. 相关组件的配置
a) 配置etcd（这里只配置单机，非集群模式）
#vim /etc/etcd/etcd.conf

ETCD_NAME=default
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"
ETCD_ADVERTISE_CLIENT_URLS="http://localhost:2379"

b) 配置kubernetes apiserver
vim /etc/kubernetes/apiserver

KUBE_API_ADDRESS="--address=0.0.0.0"
KUBE_API_PORT="--port=8080"
KUBELET_PORT="--kubelet_port=10250"
KUBE_ETCD_SERVERS="--etcd_servers=http://127.0.0.1:2379"
# 10.1.0.0/16 这个网络下面会被创建，需要保持网络一致
KUBE_SERVICE_ADDRESSES="--service-cluster-ip-range=10.1.0.0/16" 
# PS：KUBE_ADMISSION_CONTROL中的ServiceAccount需要去掉
KUBE_ADMISSION_CONTROL="--admission_control=NamespaceLifecycle,NamespaceExists,LimitRanger,SecurityContextDeny,ResourceQuota"
KUBE_API_ARGS=""

c)在etcd中定义flannel网络

etcdctl mk /atomic.io/network/config '{"Network":"10.1.0.0/16"}'

PS：这里需要和/etc/kubernetes/apiserver 中的KUBE_SERVICE_ADDRESSES中设置的一致

d) 配置flanneld
vi /etc/sysconfig/flanneld

FLANNEL_ETCD_ENDPOINTS="http://0.0.0.0:2379"
FLANNEL_ETCD_PREFIX="/atomic.io/network"

3. 启动服务，设置随机启动，显示服务状态
对etcd, kube-apiserver, kube-controller-manager，kube-scheduler，flanneld 服务操作脚本

for SERVICES in etcd kube-apiserver kube-controller-manager kube-scheduler; 
do 
systemctl restart $SERVICES
systemctl enable $SERVICES
systemctl status $SERVICES
done

至此master配置完成，运行kubectl get nodes可以查看有多少minion在运行，以及其状态。
　　 

三、MINION安装配置(每台minion机器都按如下安装配置)

1. 环境安装和配置
 

yum -y install flannel kubernetes

2. 相关组件的配置
a) 配置kubernetes连接的服务端IP(kube service服务和etcd服务)
#vim /etc/kubernetes/config

KUBE_MASTER="--master=http://10.18.18.16:8080"
KUBE_ETCD_SERVERS="--etcd_servers=http://10.18.18.16:2379"

b）配置kubernetes kubelet
#vim /etc/kubernetes/kubelet

KUBELET_ADDRESS="--address=0.0.0.0"
KUBELET_PORT="--port=10250"
# 这里是node节点的ip地址（10.18.18.7、10.18.19.8）
KUBELET_HOSTNAME="--hostname_override=10.18.18.7"
# 指定Master节点的API Server
KUBELET_API_SERVER="--api_servers=http://10.18.18.16:8080"
KUBELET_ARGS=""

c).配置flannel网络
#vim /etc/sysconfig/flanneld

FLANNEL_ETCD_ENDPOINTS="http://10.18.18.16:2379"
FLANNEL_ETCD_PREFIX="/atomic.io/network"　

PS：其中atomic.io与上面etcd中的Network对应
 
3. 启动、设置、查看服务
 

for SERVICES in flanneld kube-proxy kubelet docker; 
do 
systemctl restart $SERVICES
systemctl enable $SERVICES
systemctl status $SERVICES
done

两个node节点已经部署完成

四、配置完成验证安装

切换master上，查看节点的状态：

 kubectl get nodes
NAME         STATUS    AGE
10.18.18.7   Ready     1d
10.18.19.8   Ready     1d