20200127_Kubernetes集群环境搭建

最新推荐文章于 2024-03-12 09:25:25 发布
最新推荐文章于 2024-03-12 09:25:25 发布
阅读量299 收藏
点赞数
分类专栏： 容器化技术 文章标签： docker kubernetes linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ycoolq/article/details/104093582
版权

虚拟环境准备

节点设计

  • k8s-master:master节点 172.19.20.210
  • k8s-work1: work1节点 172.19.20.211
  • k8s-work2: work2节点 172.19.20.212

三个节点都是虚拟机，用户名和密码:root/123456,20G硬盘 4G内存

网络设置

采用桥接方式，centos7不提供eth0网络，可通过重命名方式mv etc/sysconfig/network-scripts/ifcfg-ens33 然后编辑：

#进入网络配置目录
cd /etc/sysconfig/network-scripts/
#重命名ens33->eth0
mv ifcfg-ens33 ifcfg-eth0
#编辑配置如下
vi ifcfg-eth0
#重启网络
systemctl restart network

TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
#修改dhcp->static
BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no 
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
#修改ens33->eth0
NAME=eth0
UUID=eb4a4b3f-d25e-49e3-a747-5d04cb5aedfd
DEVICE=ens33
#修改no->yes
ONBOOT=yes
#以下新增
IPADDR=172.19.20.200
GATEWAY=172.19.0.1
NETMASK=255.255.0.0
#end

如果还不清楚，可参考https://www.cnblogs.com/cnjavahome/p/11266931.html

我这边由于有网络限制，无法上外网，为了能够上外网，通过一个代理服务上网

echo "export http_proxy=http://xxxx" >> ~/.bashrc
echo "export https_proxy=https://xxx" >> ~/.bashrc
source ~/.bashrc

在安装vmware过程中，发现没有vMnet0网络，网上找了一堆没用的答案，最终发现是windows10环境下需要通过【属性】-【兼容性】-【以管理员身份运行】

K8s简介

K8S架构简介

在这里插入图片描述

以上每个框代表一台服务器，以上图形中，一共包含四台服务器，共同组成了一个ETCB集群。

K8S架构总体分为两个角色：master角色+node角色，master负责集群的管理，接收用户的指令请求，并分配到不同的计算节点上，node作为计算节点，负责接收master的指令并执行相应任务的。

master:

​ apiServer:整个架构的核心，所有的组件都要与apiServer通信

​ kubelet:负责完成master分配的任务

kube-proxy:管理任务的网络

Docker Engine:k8s不具备容器引擎，需要借助第三方的容器引擎来运行和管理容器，

ETCD：K8S的数据都存储在ETCD中

在这里插入图片描述
ETCD主要是与apiServer通信。K8S最小部署单元是POD，每个POD中可以跑多个容器，KUBELET负责创建pod，pod负责封装容器，通过proxy访问POD，用户通过访问API Server来管理集群，由apiServer做统一的协调，由node来完成任务。

K8S核心组成

Kubernetes主要由以下几个核心组件组成：

  • etcd保存了整个集群的状态；
  • apiserver提供了资源操作的唯一入口，并提供认证、授权、访问控制、API注册和发现等机制；
  • controller manager负责维护集群的状态，比如故障检测、自动扩展、滚动更新等；
  • scheduler负责资源的调度，按照预定的调度策略将Pod调度到相应的机器上；
  • kubelet负责维护容器的生命周期，同时也负责Volume（CVI）和网络（CNI）的管理；
  • Container runtime负责镜像管理以及Pod和容器的真正运行（CRI）；
  • kube-proxy负责为Service提供cluster内部的服务发现和负载均衡；

除了核心组件，还有一些推荐的Add-ons：

  • kube-dns负责为整个集群提供DNS服务

  • Ingress Controller为服务提供外网入口

  • Heapster提供资源监控

  • Dashboard提供GUI

  • Federation提供跨可用区的集群

  • Fluentd-elasticsearch提供集群日志采集、存储与查询

K8S安装详解

最低要求

  • 2台或者多台计器，centos7操作系统

  • 硬件配置，4GRAM,2CPU核心，30G硬盘

  • 网络互通，可访问外网（如果不能上外网，则需要搭建私有仓库下载软件和依赖）

  • 禁止swap分区 （会有一定的性能影响） (swap -a)

  • 准备软件环境

    可通过xshell提供的【工具】-【发送键到所有会话】

准备工作

  • 关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
  • 关闭selinux
sed -i 's/enforcing/disabled/' /etc/selinux/config
setenforce 0
  • 关闭swap
#临时
swapoff -a
#永久
vim /etc/fstabs
  • 添加host
vim /etc/hosts
172.19.20.200 k8s-master
172.19.20.201 k8s-work1
172.19.20.202 k8s-work2
  • 将桥接的IPv4流量传递到iptables的链
cat > /etc/sysctl.d/k8s.conf << EOF
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-ip4tables = 1
EOF
sysctl --system

不开可能对接一些网络组件的话会有一些流量的丢失，没有验证过。最最好开启。

套件安装

  • 安装Docker
wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum -y install docker-ce-18.06.1.ce-3.el7
systemctl enable docker && systemctl start docker

18.6是被K8S官方检测过的，兼容性较好

  • 添加aliyun yum软件源
cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
  • 安装kubeadmin,kubelet,kubectl

当前最新版本已经是1.17了 ，为了使用高版本带来的不必要的环境问题，这里指定的是1.15

yum install -y kubelet-1.15.0 kubeadm-1.15.0 kubectl-1.15.0
systemctl enable kubelet
  • 部署kubernetes Master

需要master节点上运行

kubeadm init --apiserver-advertise-address=172.19.20.200 --image-repository registry.aliyuncs.com/google_containers  --kubernetes-version v1.15.0  --service-cidr=10.1.0.0/16  --pod-network-cidr=10.244.0.0/16

此处需要保证节点的时间与远程服务器的时间是一致的，否则服务器认为证书过期，会拒绝下载

certificate has expired or is not yet valid

几个时间服务器貌似都不可用，我直接通过肉眼同步

date -s '2020-01-21 12:20:44'

CPU如果少于2个，则提示报错

[ERROR NumCPU]: the number of available CPUs 1 is less than the required 2

可通过编辑虚拟机设置来完成

提示connection refused

[ERROR ImagePull]: failed to pull image registry.aliyuncs.com/google_containers/coredns:1.3.1: output: Error response from daemon: Get https://registry.aliyuncs.com/v2/: dial tcp: lookup registry.aliyuncs.com on [::1]:53: read udp [::1]:43296->[::1]:53: read: connection refused

可通过设置docker代理上网来解决

mkdir -p /etc/systemd/system/docker.service.d/
cat <<EOF > /etc/systemd/system/docker.service.d/http-proxy.conf
[Service]
Environment="HTTP_PROXY=http://xxxx" "NO_PROXY=xxxx"
EOF
systemctl daemon-reload
systemctl restart docker

启用kubectl工具

mkdir -p $HOME/.kube
cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
chown $(id -u):$(id -g) $HOME/.kube/config

#验证kubectl
kubectl get nodes

[ERROR FileContent--proc-sys-net-bridge-bridge-nf-call-iptables]: /proc/sys/net/bridge/bridge-nf-call-iptables contents are not set to 1

 echo 1 > /proc/sys/net/bridge/bridge-nf-call-iptables
 echo 1 > /proc/sys/net/bridge/bridge-nf-call-ip6tables

正常情况下，默认日志级别下，整个执行的输出日志如下：

[init] Using Kubernetes version: v1.15.0
#拉取镜像
#启动kubelet
#生成证书
......
Your Kubernetes control-plane has initialized successfully!

To start using your cluster, you need to run the following as a regular user:

  mkdir -p $HOME/.kube
  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
  sudo chown $(id -u):$(id -g) $HOME/.kube/config

You should now deploy a pod network to the cluster.
Run "kubectl apply -f [podnetwork].yaml" with one of the options listed at:
  https://kubernetes.io/docs/concepts/cluster-administration/addons/

Then you can join any number of worker nodes by running the following on each as root:

kubeadm join 192.168.2.200:6443 --token 0a0v43.8o4ti52zxhfmx0s1 \
    --discovery-token-ca-cert-hash sha256:0f42404d860bbf4c313506ae368922d8c3226e898795ffe5c43082dbb71b57e3

按照提示，运行以下命令:

  mkdir -p $HOME/.kube
  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
  sudo chown $(id -u):$(id -g) $HOME/.kube/config
  • 安装pod网络插件

可选flannel、calico、weave-net等

kubectl apply -f "https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')"

网络插件部署完成后，可以查看相关pods有没有启动

[root@localhost ~]# kubectl get pods -n kube-system
NAME                                            READY   STATUS    RESTARTS   AGE
coredns-bccdc95cf-js2tx                         1/1     Running   0          19m
coredns-bccdc95cf-zvh5m                         1/1     Running   0          19m
etcd-localhost.localdomain                      1/1     Running   0          18m
kube-apiserver-localhost.localdomain            1/1     Running   0          18m
kube-controller-manager-localhost.localdomain   1/1     Running   0          18m
kube-proxy-5flg2                                1/1     Running   0          19m
kube-scheduler-localhost.localdomain            1/1     Running   0          18m
weave-net-fwl6f                                 2/2     Running   0          9m31s

加入集群

按照kubeadm init的提示内容，将节点加入集群。

kubeadm join 192.168.2.200:6443 --token 0a0v43.8o4ti52zxhfmx0s1 --discovery-token-ca-cert-hash sha256:0f42404d860bbf4c313506ae368922d8c3226e898795ffe5c43082dbb71b57e3

如果忘了加入命令或者token过期，可通过以下命令获取

kubeadm token create --print-join-command

此时，可以查看集群节点状态，前提是要加入config认证

[root@localhost .kube]# kubectl get nodes
NAME                    STATUS   ROLES    AGE     VERSION
k8s-work1               Ready    <none>   17m     v1.15.0
k8s-work2               Ready    <none>   7m44s   v1.15.0
localhost.localdomain   Ready    master   56m     v1.15.0

测试集群

K8S应用部署流程

K8S应用部署，简单的说，就是deployment-service-ingress这三个核心的模块创建
在这里插入图片描述

测试部署（nginx)

此处用一个简单的nginx镜像来测试

#创建deploy
kubectl create deployment nginx --image=nginx
#暴露服务service
kubectl expose deployment nginx --port=80 --type=NodePort
#查看
[root@localhost ~]# kubectl get pod,svc -n default | grep nginx
pod/nginx-554b9c67f9-85bqz   1/1     Running   0          108s
service/nginx        NodePort    10.1.188.35   <none>        80:31024/TCP   102s

访问部署的服务

curl http://192.168.2.201:31024/

实际我们暴露服务，都是通过ingress，此处不做介绍

ycoolq
关注
专栏目录
Kubernetes技术-Kubernetes集群环境搭建准备
u013185175的博客
08-30 135
Master节点: 至少8核cpu、16G内存、120G硬盘存储，当然，这里配置的话越大越好。Master节点:至少2核cpu、4G内存、20G硬盘存储，当然，这里配置的话越大越好。-2: 配置三台虚拟机在同一个网段中(可以相互通信)，并且可以连接外网(可以拉取镜像)Node节点:至少16核cpu、64G内存、500G硬盘，当然，越大越好。(1).搭建三台虚拟机，分别为:master、node1、node2。Node节点:至少4核cpu、8G内存、40G硬盘，当然，越大越好。-3: 禁止swap分区。
Kubernetes1.26集群环境搭建
junyi52的博客
12-26 1631
练习如何从零开始搭建一个简单的kubernetes集群
Kubernetes环境搭建
遇事不决 可问春风
09-03 552
目录服务器说明系统设置主机名安装依赖包关闭防火墙、swap，重置iptables系统参数设置软件安装、系统部署安装docker（所有节点）安装必要工具（所有节点）部署主节点部署flannel网络部署node节点集群状态检测创建nginx ds检查各种ip连通性检查dns可用性部署Dashboard 去年就通过本地搭建虚拟机的方式实现了k8s环境的搭建和应用部署实践，但一直没有将部署方式记录下来。这次在公司的服务器上搭建了k8s集群，顺便将部署步骤进行记录 此次部署的k8s版本为1.14.0，非高可用版本，高
kubernetes环境搭建
督门提酒的博客
02-22 6198
搭建docker私有仓库，建立k8s集群 服务器IP角色分布 192.168.5.2 etcd server 192.168.5.2 kubernetes master 192.168.5.3 kubernetes node 192.168.5.4 kubernetes node 确认环境 centos7 确认liunx内核版本 uname -a yum update
Kubernetes集群环境的搭建
01-31
该文章介绍以手动的方式，搭建Kubernetes容器云集群环境，所谓手动是逐步通过进程的方式来搭建。现在的Kubernetes搭建都很方便，主要通过Kubeadm结合Kubernetes的镜像包来搭建部署，但对很多新手来说，里面细节的...
kubernetes集群环境搭建
哭的博客
11-17 1854
2、Kubeadm：一个用于快速搭建kubernetes集群的工具，https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm/3、二进制包：从官网下载每个组件的二进制包，依次去安装，此方式对于理解kubernetes组件更加有效，https://github.com/kubernetes/kubernetes。多主多从：多台master节点和多台node节点，搭建麻烦，安全性高，适用于生产环境。
Ubuntu 16.04搭建Kubernetes集群环境 · 语雀.pdf
09-09
在Ubuntu 16.04上搭建Kubernetes集群涉及多个步骤，包括系统准备、组件安装、集群初始化、节点加入、网络配置以及验证集群状态。了解并掌握这些步骤对于成功部署和管理Kubernetes集群至关重要。随着Kubernetes版本的...
Kubernetes：环境搭建
you_fathe的博客
12-21 1016
kubernets 概念，环境搭建方法
kubernetes环境搭建（上）
lixinkuan的博客
01-13 873
预先环境准备 虚拟机介绍和安装 3台虚拟机通过centOS7克隆，并同时按照了的docker。 系统类型 IP地址 节点角色 CPU Memory Hostname Centos7 192.168.18.151 master 1 1G node51 Centos7 192.168.18.152 worker ...
Kubernetes----Kubernetes集群环境搭建
redrose2100的博客
03-03 1238
一、安装简介 集群类型 一主多从：一台Master节点和多台Node节点，搭建简单，但是又单机故障风险，适合用于测试环境 多主多从：多台Master节点和多台Node节点，搭建麻烦，安全性高，适合用于生产环境 安装方式 mminikube：一个用于快速搭建单节点kubernetes的工具 kubeadm：一个用于快速搭建kubernetes集群的工具 二进制包：从官网下载每个组件的二进制包，依次去安装，安装复杂，但对于理解kubernetes组件更加有效 二、使用kubeadm工具方式安装一主多从
kubernetes 集群环境搭建
weixin_42408060的博客
08-10 161
kubernetes组件 一个kubernetes集群主要是由控制节点(master)、**工作节点(node)**构成，每个节点上都会安装不同的组件。 master：集群的控制平面，负责集群的决策 ( 管理 ) ApiServer : 资源操作的唯一入口，接收用户输入的命令，提供认证、授权、API注册和发现等机制 Scheduler : 负责集群资源调度，按照预定的调度策略将Pod调度到相应的node节点上 ControllerManager : 负责维护集群的状态，比如程序部署安排、故障检测、自
Kubernetes 集群环境搭建
谢谢你们的关注
07-19 473
Kubernetes 集群环境搭建
Kubernetes实践(1)--环境搭建
顽石的专栏
11-12 1909
本文使用的环境为vmvare虚拟机，操作系统版本为Centos7.2，64位，下面具体描述kubernetes的环境搭建。1. 搭建Docker运行环境搭建kubernetes环境需要先将Docker自身的环境搭建好，下面开始搭建Docker运行环境。首先需要开启路由转发功能，如果不执行此步骤容器不能访问外网: echo 1 > /proc/sys/net/ipv4/ip_forward 配置yu
Kubernetes环境的搭建【入门篇】
最新发布
小桥流水 的专栏
03-12 1635
初学Kubernetes环境的搭建
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值