第二章 集群环境搭建

已于 2024-05-22 16:45:44 修改
阅读量660 收藏 19
点赞数 7
分类专栏： 【黑马】【Kubernetes】 文章标签： kubernetes
于 2024-05-22 16:14:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yirenyuan/article/details/139122915
版权

本章节主要介绍如何搭建kubernetes的集群环境

1. 环境规划

1.1 集群类型

kubernetes 集群大体上分为两类：一主多从 和 多主多从。

  • 一主多从：一台Master节点和多台Node节点，搭建简单，但是有单机故障风险，适合用于测试环境
  • 多主多从：多台Master节点和多台Node节点，搭建麻烦，安全性高，适合用于生产环境
    在这里插入图片描述

说明：为了测试简单，本次搭建的是 一主两从 类型的集群

1.2 安装方式

kubernetes有多种部署方式，目前主流的方式有kubeadm、minikube、二进制包

  • minikube：一个用于快速搭建单节点kubernetes的工具
  • kubeadm：一个用于快速搭建kubernetes集群的工具
  • 二进制包 ：从官网下载每个组件的二进制包，依次去安装，此方式对于理解kubernetes组件更加有效

说明：现在需要安装kubernetes的集群环境，但是又不想过于麻烦，所以选择使用 kubeadm 方式

1.3 主机规划

作用IP地址操作系统配置
Master192.168.109.101Centos7.5 基础设施服务器2颗CPU 2G内存 50G硬盘
Node1192.168.109.102Centos7.5 基础设施服务器2颗CPU 2G内存 50G硬盘
Node2192.168.109.103Centos7.5 基础设施服务器2颗CPU 2G内存 50G硬盘

2. 环境搭建

​ 本次环境搭建需要安装三台Centos服务器（一主二从），然后在每台服务器中分别安装docker（18.06.3），kubeadm（1.17.4）、kubelet（1.17.4）、kubectl（1.17.4）程序。

2.1 主机安装

安装虚拟机过程中注意下面选项的设置：

  • 操作系统环境：CPU（2C） 内存（2G） 硬盘（50G）

  • 语言选择：中文简体

  • 软件选择：基础设施服务器

  • 分区选择：自动分区

  • 网络配置：按照下面配置网路地址信息

网络地址：192.168.109.100  （每台主机都不一样  分别为100、101、102）
子网掩码：255.255.255.0
默认网关：192.168.109.2
DNS：    223.5.5.5

在这里插入图片描述

  • 主机名设置：按照下面信息设置主机名
master节点： master
node节点：   node1
node节点：   node2

在这里插入图片描述

2.2 环境初始化

1） 检查操作系统的版本

# 此方式下安装kubernetes集群要求Centos版本要在7.5或之上
[root@master ~]# cat /etc/redhat-release
CentOS Linux release 7.5.1804 (Core)

2） 主机名解析

为了方便后面集群节点间的直接调用，在这配置一下主机名解析，企业中推荐使用内部DNS服务器

# 主机名成解析 编辑三台服务器的/etc/hosts文件，添加下面内容
192.168.109.100  master
192.168.109.101  node1
192.168.109.102  node2

3） 时间同步

kubernetes要求集群中的节点时间必须精确一致，这里直接使用chronyd服务从网络同步时间。

企业中建议配置内部的时间同步服务器

# 启动chronyd服务
[root@master ~]# systemctl start chronyd
# 设置chronyd服务开机自启
[root@master ~]# systemctl enable chronyd
# chronyd服务启动稍等几秒钟，就可以使用date命令验证时间了
[root@master ~]# date

4） 禁用iptables和firewalld服务

kubernetes和docker在运行中会产生大量的iptables规则，为了不让系统规则跟它们混淆，直接关闭系统的规则

# 1 关闭firewalld服务
[root@master ~]# systemctl stop firewalld
[root@master ~]# systemctl disable firewalld
# 2 关闭iptables服务
[root@master ~]# systemctl stop iptables
[root@master ~]# systemctl disable iptables

5） 禁用selinux

selinux是linux系统下的一个安全服务，如果不关闭它，在安装集群中会产生各种各样的奇葩问题

# 编辑 /etc/selinux/config 文件，修改SELINUX的值为disabled
# 注意修改完毕之后需要重启linux服务
SELINUX=disabled

6） 禁用swap分区

swap分区指的是虚拟内存分区，它的作用是在物理内存使用完之后，将磁盘空间虚拟成内存来使用

启用swap设备会对系统的性能产生非常负面的影响，因此kubernetes要求每个节点都要禁用swap设备

但是如果因为某些原因确实不能关闭swap分区，就需要在集群安装过程中通过明确的参数进行配置说明

# 编辑分区配置文件/etc/fstab，注释掉swap分区一行
# 注意修改完毕之后需要重启linux服务
 UUID=455cc753-7a60-4c17-a424-7741728c44a1 /boot    xfs     defaults        0 0
 /dev/mapper/centos-home /home                      xfs     defaults        0 0
# /dev/mapper/centos-swap swap                      swap    defaults        0 0

7）修改linux的内核参数

# 修改linux的内核参数，添加网桥过滤和地址转发功能
# 编辑/etc/sysctl.d/kubernetes.conf文件，添加如下配置:
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1

# 重新加载配置
[root@master ~]# sysctl -p

# 加载网桥过滤模块
[root@master ~]# modprobe br_netfilter

# 查看网桥过滤模块是否加载成功
[root@master ~]# lsmod | grep br_netfilter

8）配置ipvs功能

在kubernetes中service有两种代理模型，一种是基于iptables的，一种是基于ipvs的

两者比较的话，ipvs的性能明显要高一些，但是如果要使用它，需要手动载入ipvs模块

# 1 安装ipset和ipvsadm
[root@master ~]# yum install ipset ipvsadmin -y

# 2 添加需要加载的模块写入脚本文件
[root@master ~]# cat <<EOF >  /etc/sysconfig/modules/ipvs.modules
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF

# 3 为脚本文件添加执行权限
[root@master ~]# chmod +x /etc/sysconfig/modules/ipvs.modules

# 4 执行脚本文件
[root@master ~]# /bin/bash /etc/sysconfig/modules/ipvs.modules

# 5 查看对应的模块是否加载成功
[root@master ~]# lsmod | grep -e ip_vs -e nf_conntrack_ipv4

9） 重启服务器

上面步骤完成之后，需要重新启动linux系统

[root@master ~]# reboot

2.3 安装docker

# 1 切换镜像源
[root@master ~]# wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo

# 2 查看当前镜像源中支持的docker版本
[root@master ~]# yum list docker-ce --showduplicates

# 3 安装特定版本的docker-ce
# 必须指定--setopt=obsoletes=0，否则yum会自动安装更高版本
[root@master ~]# yum install --setopt=obsoletes=0 docker-ce-18.06.3.ce-3.el7 -y

# 4 添加一个配置文件
# Docker在默认情况下使用的Cgroup Driver为cgroupfs，而kubernetes推荐使用systemd来代替cgroupfs
[root@master ~]# mkdir /etc/docker
[root@master ~]# cat <<EOF >  /etc/docker/daemon.json
{
  "exec-opts": ["native.cgroupdriver=systemd"],
  "registry-mirrors": ["https://kn0t2bca.mirror.aliyuncs.com"]
}
EOF

# 5 启动docker
[root@master ~]# systemctl restart docker
[root@master ~]# systemctl enable docker

# 6 检查docker状态和版本
[root@master ~]# docker version

2.4 安装kubernetes组件

# 由于kubernetes的镜像源在国外，速度比较慢，这里切换成国内的镜像源
# 编辑/etc/yum.repos.d/kubernetes.repo，添加下面的配置 
[kubernetes]
name=Kubernetes
baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
       http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg

# 安装kubeadm、kubelet和kubectl
[root@master ~]# yum install --setopt=obsoletes=0 kubeadm-1.17.4-0 kubelet-1.17.4-0 kubectl-1.17.4-0 -y

# 配置kubelet的cgroup
# 编辑/etc/sysconfig/kubelet，添加下面的配置
KUBELET_CGROUP_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"

# 4 设置kubelet开机自启
[root@master ~]# systemctl enable kubelet

2.5 准备集群镜像

# 在安装kubernetes集群之前，必须要提前准备好集群需要的镜像，所需镜像可以通过下面命令查看
[root@master ~]# kubeadm config images list

# 下载镜像
# 此镜像在kubernetes的仓库中,由于网络原因,无法连接，下面提供了一种替代方案
images=(
    kube-apiserver:v1.17.4
    kube-controller-manager:v1.17.4
    kube-scheduler:v1.17.4
    kube-proxy:v1.17.4
    pause:3.1
    etcd:3.4.3-0
    coredns:1.6.5
)

for imageName in ${images[@]} ; do
	docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName
	docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName 		k8s.gcr.io/$imageName
	docker rmi registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName
done

2.6 集群初始化

下面开始对集群进行初始化，并将node节点加入到集群中

下面的操作只需要在master节点上执行即可

# 创建集群
[root@master ~]# kubeadm init \
	--kubernetes-version=v1.17.4 \
    --pod-network-cidr=10.244.0.0/16 \
    --service-cidr=10.96.0.0/12 \
    --apiserver-advertise-address=192.168.109.100

# 创建必要文件
[root@master ~]# mkdir -p $HOME/.kube
[root@master ~]# sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
[root@master ~]# sudo chown $(id -u):$(id -g) $HOME/.kube/config

下面的操作只需要在node节点上执行即可

# 将node节点加入集群
[root@master ~]# kubeadm join 192.168.109.100:6443 \ 
	--token 8507uc.o0knircuri8etnw2 \
	--discovery-token-ca-cert-hash \
	sha256:acc37967fb5b0acf39d7598f8a439cc7dc88f439a3f4d0c9cae88e7901b9d3f
	
# 查看集群状态 此时的集群状态为NotReady，这是因为还没有配置网络插件
[root@master ~]# kubectl get nodes
NAME     STATUS     ROLES    AGE     VERSION
master   NotReady   master   6m43s   v1.17.4
node1    NotReady   <none>   22s     v1.17.4
node2    NotReady   <none>   19s     v1.17.4

2.7 安装网络插件

kubernetes支持多种网络插件，比如flannel、calico、canal等等，任选一种使用即可，本次选择flannel

下面操作依旧只在master节点执行即可，插件使用的是DaemonSet的控制器，它会在每个节点上都运行

# 获取fannel的配置文件
[root@master ~]# wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

# 修改文件中quay.io仓库为quay-mirror.qiniu.com

# 使用配置文件启动fannel
[root@master ~]# kubectl apply -f kube-flannel.yml

# 稍等片刻，再次查看集群节点的状态
[root@master ~]# kubectl get nodes
NAME     STATUS   ROLES    AGE     VERSION
master   Ready    master   15m     v1.17.4
node1    Ready    <none>   8m53s   v1.17.4
node2    Ready    <none>   8m50s   v1.17.4

至此，kubernetes的集群环境搭建完成

3. 服务部署

接下来在kubernetes集群中部署一个nginx程序，测试下集群是否在正常工作。

# 部署nginx
[root@master ~]# kubectl create deployment nginx --image=nginx:1.14-alpine

# 暴露端口
[root@master ~]# kubectl expose deployment nginx --port=80 --type=NodePort

# 查看服务状态
[root@master ~]# kubectl get pods,service
NAME                         READY   STATUS    RESTARTS   AGE
pod/nginx-86c57db685-fdc2k   1/1     Running   0          18m

NAME                 TYPE        CLUSTER-IP      EXTERNAL-IP   PORT(S)        AGE
service/kubernetes   ClusterIP   10.96.0.1       <none>        443/TCP        82m
service/nginx        NodePort    10.104.121.45   <none>        80:30073/TCP   17m

# 4 最后在电脑上访问下部署的nginx服务

在这里插入图片描述

来世做春风嘛
关注
专栏目录
Hadoop 集群环境搭建
若北辰
12-20 1455
大数据无非两个问题，如何存放数据，数据如何计算 存放数据用的就是Hadoop中的HDFS，进行分布式存储 数据计算就是用的Hadoop中的MapReduce，进行分布式计算 Hive 就是SQL on Hadoop,Hive数据存储在HDFS上，Hive查询最终转化为MapReduce spark是基于内存的计算，MapReduce是基于磁盘的计算，所以spark的卖点就是快，甚至能快100倍 spark中也有SQL，spark SQL spark流处理：streaming MLlib：机器学习 图处理
Linux实战50台服务器规模集群模式之环境搭建准备篇（综合网络整理）
热门推荐
Vic的博客
06-09 2万+
一、搭建集群1、采购服务器、性能测试、不同集群用什么配置。2、采购云服务（云主机、虚拟机）。3、采购带宽、压力测试。4、采购CDN服务。二、大致架构图 三、规划1、服务器规划服务器数量作用负载均衡2对访问网站的流量进行分流，减少流量对某台服务器的压力Web2处理用户页面访问请求（使用Nginx或Apache）NFS存储1存储图片、附件、头像等静态数据（兼职批量分发和管理）备份服务器1对全网服务器的...
从零开始Hadoop集群环境搭建
最新发布
Sup星月★然的博客
10-04 1285
从零开始实现：虚拟机创建与配置，IP地址和主机名称配置，Hadoop集群的搭建与配置，JDK与Hadoop的安装......
集群环境搭建
while__false的博客
08-31 344
HADOOP 版本选择3.1.1 ssh免密 配置文件 hadoop-env.sh core-site.xml hdfs-site.xml yarn-site.xml mapred-site.xml 编写workersname 启动脚本添加安全用户定义 /etc/profile export JAVA_HOME=/opt/apps/jdk1.8.0_191/ export HADOOP_HOME=/opt/apps/hadoop-3.1.1 export PATH=$PATH:$JA
hadoop、zookeeper、hbase、spark集群环境搭建
Trigl的博客
09-13 1万+
本文详细讲解如何搭建hadoop、zookeeper、hbase和spark的集群环境，这里我是在本地虚拟机上搭建的集群，但是和实际环境的配置差不多。我会从零开始搭建并且尽量写得详细，所以还会讲到很多配置linux环境的东西，希望大家不要烦，务必按照步骤一步步做下去。 本文主要讲了以下内容： Linux系统的一些基础配置 安装jdk 配置SSH免登陆 hadoop的安装和配置 zookeeper集
hadoop集群环境搭建
抱愚守拙，持之以恒；不问结果，相信过程.
05-06 1440
HDFS设计思想 DataNode：用来在磁盘上存储数据 HDFS  数据存储单元（ block ） 1 文件被切分成固定大小的数据block块  •默认数据块大小为 64MB(hadoop1.x版本64M，2.x为128M) ，可配置  •若文件大小不到 64MB  ，则单独存成一个block   比如：一个120M的文件会分成64M+56M两个block块，虽然第二个分割不到64...
第二章 集群环境搭建.md
03-18
第二章 集群环境搭建.md
第二章 K8S集群环境搭建
01-10
第二章 K8S集群环境搭建
第二章(Hadoop大数据处理实战)搭建Hadoop分布式集群.pdf
06-27
第二章(Hadoop大数据处理实战)搭建Hadoop分布式集群.pdf第二章(Hadoop大数据处理实战)搭建Hadoop分布式集群.pdf第二章(Hadoop大数据处理实战)搭建Hadoop分布式集群.pdf第二章(Hadoop大数据处理实战)搭建Hadoop分布式...
第6章 Redis集群环境部署.pptx
05-31
### 第6章 Redis集群环境部署 #### 一、主从复制 **概念与特点：** 主从复制是Redis实现高可用性的一种基础架构模式。它允许数据从一个服务器（称为Master）复制到一个或多个其他服务器（称为Slaves）。这种复制...
第2章 大数据实验环境搭建.zip
03-06
本章主要涵盖了如何构建一个适合进行大数据处理和分析的实验环境。以下将详细介绍这个过程，包括所需的软件、硬件配置、安装步骤以及常见问题的解决方法。 一、硬件需求 大数据处理通常需要较高的计算和存储能力。...
docker redis集群搭建_Redis之集群环境搭建
weixin_39781783的博客
11-28 93
Redis集群一、Redis集群相关概念1.Redis集群介绍Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误.Redis 集群通过分区来提供一定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下继续处理命令. Red...
1.集群环境搭建
FatPuffer
12-06 742
集群环境搭建
Ningx集群环境搭建
http://www.onlyze.cn/
08-26 1511
Ningx集群环境搭建 Nginx是什么？ Nginx ("engine x") 是⼀个⾼性能的 HTTP 和 反向代理 服务器，也是⼀个 IMAP/ POP3/SMTP 代理服务器。⼀直纳闷这个X是怎么来的在⽹上查了查原来X代表很⽜逼的 样⼦，Nginx就是代表⼀个⾮常⽜逼的引擎服务器系统，在很多年以前记得都是⽤的 apache来作为分流以及负载均衡的作⽤，在过了⼏年中⼀个俄罗斯⼈又开
【K8S】之 搭建集群环境（一）
fanfan4569的博客
12-01 288
文章目录前言：一、准备二、使用 virtualbox 创建 `k8s-master`三、VirtualBox全局配置：添加NatNetWork四、创建其他节点五、SSH连接到 `k8s-master`六、Windows10 通过 SSH 连接到 `k8s-master` 前言： 在virtualbox上安装ubuntu并搭建k8s 搭建一台 master node，2 台 worker node...
MySQL Cluster 7.3.6集群环境搭建安装配置文档
小包的技术专栏
04-16 831
集群环境搭建配置文档MYSQL CLUSTER 7.3.6   网络组申请的mysql集群环境，Red Hat linux 6.3 64位操作系统，规划4台虚拟主机  配置： CPU 4核，内存6G,存储100GMYSQL CLUSTER 7.3.6 目前最新版本一、节点分布情况：MGM:10.40.20.147 管理节点NDBD1:10.40.20.148 存储节点NDBD2:10.40.20....
Flink第三章Flink集群搭建
汉子一枚
07-20 532
Flink集群搭建 Flink 支持多种安装模式。 local（ 本地） ——单机模式， 一般不使用 standalone ——独立模式， Flink 自带集群，开发测试环境使用 yarn——计算资源统一由 Hadoop YARN 3.1 standalone 集群环境 3.1.1 准备工作 jdk1.8 及以上【 配置 JAVA_HOME 环境变量】 ssh 免密码登录【 集群内节点之间免密登录】 3.1.2 下载安装包 https://archive.apache.org/dist/flink/fli
centos7-第一章-1.学习环境搭建
04-14
在开始具体的环境搭建之前，我们首先简要介绍了《学神 IT 教育》所提供的Linux 云计算集群架构师课程及其背景。该课程旨在帮助学员从零基础起步，逐步掌握Linux操作系统以及相关的云计算技术，最终能够独立设计并...
保姆级教学——集群环境搭建及创建集群
weixin_42402597的博客
07-17 3922
集群环境搭建及集群配置
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值