Kubernetes 集群部署 ------ 二进制部署（二）

最新推荐文章于 2022-05-05 13:51:53 发布
最新推荐文章于 2022-05-05 13:51:53 发布
阅读量314 收藏
点赞数
分类专栏： k8s
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yplayer001/article/details/104235600
版权

单节点 ：https://blog.csdn.net/Yplayer001/article/details/104234807
在这里插入图片描述

先具备单master1节点部署环境

三、master02部署

优先关闭防火墙和selinux服务
在master01上操作

//复制kubernetes目录到master02
[root@localhost k8s]# scp -r /opt/kubernetes/ root@192.168.50.150:/opt
The authenticity of host '192.168.50.150 (192.168.50.150)' can't be established.
ECDSA key fingerprint is SHA256:APJMEiNcVfKUcen7B87XvVOjtToM3/xc7CbAgZamvKQ.
ECDSA key fingerprint is MD5:24:0b:7c:57:7d:b7:51:70:7a:f5:b9:2a:32:fc:f7:ea.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.50.150' (ECDSA) to the list of known hosts.
root@192.168.50.150's password: 
token.csv                                          100%   84    32.6KB/s   00:00    
kube-apiserver                                     100%  934   115.9KB/s   00:00    
kube-scheduler                                     100%   94    20.4KB/s   00:00    
kube-controller-manager                            100%  483   127.8KB/s   00:00    
kube-apiserver                                     100%  184MB  45.9MB/s   00:04    
kubectl                                            100%   55MB  54.7MB/s   00:01    
kube-controller-manager                            100%  155MB  54.2MB/s   00:02    
kube-scheduler                                     100%   55MB  57.0MB/s   00:00    
ca-key.pem                                         100% 1679     1.4MB/s   00:00    
ca.pem                                             100% 1359   975.3KB/s   00:00    
server-key.pem                                     100% 1679   491.8KB/s   00:00    
server.pem                                         100% 1643   455.7KB/s   00:00   //复制master中的三个组件启动脚本kube-apiserver.service                   kube-controller-manager.service        kube-scheduler.service  

[root@localhost k8s]# scp /usr/lib/systemd/system/{kube-apiserver,kube-controller-manager,kube-scheduler}.service root@192.168.50.150:/usr/lib/systemd/system/
root@192.168.50.150's password: 
kube-apiserver.service                             100%  282   253.0KB/s   00:00    
kube-controller-manager.service                    100%  317   257.6KB/s   00:00    
kube-scheduler.service                             100%  281   112.3KB/s   00:00

master02上操作
修改配置文件kube-apiserver中的IP
–bind-address=192.168.50.150
–advertise-address=192.168.50.150

[root@localhost ~]# cd /opt/kubernetes/cfg/
[root@localhost cfg]# vim kube-apiserver
KUBE_APISERVER_OPTS="--logtostderr=true \
--v=4 \
--etcd-servers=https://192.168.195.149:2379,https://192.168.195.150:2379,https://192.168.195.151:2379 \
--bind-address=192.168.50.150 \
--secure-port=6443 \
--advertise-address=192.168.50.150 \
--allow-privileged=true \
--service-cluster-ip-range=10.0.0.0/24 \
--enable-admission-plugins=NamespaceLifecycle,LimitRanger,ServiceAccount,ResourceQuota,NodeRestriction \
--authorization-mode=RBAC,Node \
--kubelet-https=true \
--enable-bootstrap-token-auth \
--token-auth-file=/opt/kubernetes/cfg/token.csv \
--service-node-port-range=30000-50000 \
--tls-cert-file=/opt/kubernetes/ssl/server.pem  \
--tls-private-key-file=/opt/kubernetes/ssl/server-key.pem \
--client-ca-file=/opt/kubernetes/ssl/ca.pem \
--service-account-key-file=/opt/kubernetes/ssl/ca-key.pem \
--etcd-cafile=/opt/etcd/ssl/ca.pem \
--etcd-certfile=/opt/etcd/ssl/server.pem \
--etcd-keyfile=/opt/etcd/ssl/server-key.pem"
特别注意：master02一定要有etcd证书，否则apiserver服务无法启动
需要拷贝master01上已有的etcd证书给master02使用
[root@localhost k8s]# scp -r /opt/etcd/ root@192.168.50.150:/opt/
root@192.168.50.150's password: 
etcd                                               100%  516    16.3KB/s   00:00    
etcd                                               100%   18MB  56.0MB/s   00:00    
etcdctl                                            100%   15MB  45.6MB/s   00:00    
ca-key.pem                                         100% 1675   480.5KB/s   00:00    
ca.pem                                             100% 1265   523.0KB/s   00:00    
server-key.pem                                     100% 1679     1.6MB/s   00:00    
server.pem                                         100% 1338     1.0MB/s   00:00

启动master02中的三个组件服务

[root@localhost cfg]# systemctl start kube-apiserver.service 
[root@localhost cfg]# systemctl start kube-controller-manager.service 
[root@localhost cfg]# systemctl start kube-scheduler.service

增加环境变量

[root@localhost cfg]# vim /etc/profile
#末尾添加
export PATH=$PATH:/opt/kubernetes/bin/
[root@localhost cfg]# source /etc/profile

master2查看群集中的节点

[root@localhost cfg]# kubectl get node
NAME              STATUS   ROLES    AGE     VERSION
192.168.50.140   Ready    <none>   2d12h   v1.12.3
192.168.50.141   Ready    <none>   38h     v1.12.3

四、负载均衡部署

lb1（192.168.50.142/24）
lb2（192.168.50.143/24）
VIP （192.168.50.100/24）

lb01 lb02部署：
安装nginx服务，把nginx.sh和keepalived.conf脚本拷贝到家目录

[root@localhost ~]# systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0
[root@localhost ~]# vim /etc/yum.repos.d/nginx.repo
[nginx]
name=nginx repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
[root@localhost ~]# yum install nginx -y
//添加四层转发
[root@localhost ~]# vim /etc/nginx/nginx.conf 

events {
    worker_connections  1024;
}

#将stream模块添加进去
stream {

   log_format  main  '$remote_addr $upstream_addr - [$time_local] $status $upstream_bytes_sent';
    access_log  /var/log/nginx/k8s-access.log  main;

    upstream k8s-apiserver {
        server 192.168.50.139:6443;
        server 192.168.50.150:6443;
    }
    server {
                listen 6443;
                proxy_pass k8s-apiserver;
    }
    }
    
http {
[root@localhost ~]# systemctl start nginx

部署keepalived服务

[root@localhost ~]# yum install keepalived -y
//修改配置文件
[root@localhost ~]# cp keepalived.conf /etc/keepalived/keepalived.conf 
cp：是否覆盖"/etc/keepalived/keepalived.conf"？ yes
//注意：lb01是Mster配置如下：

! Configuration File for keepalived 
 
global_defs { 
   # 接收邮件地址 
   notification_email { 
     acassen@firewall.loc 
     failover@firewall.loc 
     sysadmin@firewall.loc 
   } 
   # 邮件发送地址 
   notification_email_from Alexandre.Cassen@firewall.loc  
   smtp_server 127.0.0.1 
   smtp_connect_timeout 30 
   router_id NGINX_MASTER 
} 

vrrp_script check_nginx {
    script "/etc/nginx/check_nginx.sh"
}

vrrp_instance VI_1 { 
    state MASTER 
    interface ens33
    virtual_router_id 51 # VRRP 路由 ID实例，每个实例是唯一的 
    priority 100    # 优先级，备服务器设置 90 
    advert_int 1    # 指定VRRP 心跳包通告间隔时间，默认1秒 
    authentication { 
        auth_type PASS      
        auth_pass 1111 
    }  
    virtual_ipaddress { 
        192.168.50.100/24 
    } 
    track_script {
        check_nginx
    } 
}

//注意：lb02是Backup配置如下：
! Configuration File for keepalived 
 
global_defs { 
   # 接收邮件地址 
   notification_email { 
     acassen@firewall.loc 
     failover@firewall.loc 
     sysadmin@firewall.loc 
   } 
   # 邮件发送地址 
   notification_email_from Alexandre.Cassen@firewall.loc  
   smtp_server 127.0.0.1 
   smtp_connect_timeout 30 
   router_id NGINX_MASTER 
} 

vrrp_script check_nginx {
    script "/etc/nginx/check_nginx.sh"
}

vrrp_instance VI_1 { 
    state BACKUP 
    interface ens33
    virtual_router_id 51 # VRRP 路由 ID实例，每个实例是唯一的 
    priority 90    # 优先级，备服务器设置 90 
    advert_int 1    # 指定VRRP 心跳包通告间隔时间，默认1秒 
    authentication { 
        auth_type PASS      
        auth_pass 1111 
    }  
    virtual_ipaddress { 
        192.168.50.100/24 
    } 
    track_script {
        check_nginx
    } 
}

[root@localhost ~]# vim /etc/nginx/check_nginx.sh
count=$(ps -ef |grep nginx |egrep -cv "grep|$$")

if [ "$count" -eq 0 ];then
    systemctl stop keepalived
fi
[root@localhost ~]# chmod +x /etc/nginx/check_nginx.sh
[root@localhost ~]# systemctl start keepalived
查看lb01地址信息
[root@localhost ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN qlen 1
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:1a:6f:51 brd ff:ff:ff:ff:ff:ff
    inet 192.168.50.142/24 brd 192.168.50.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.50.100/24 scope global secondary ens33
       valid_lft forever preferred_lft forever
    inet6 fe80::d324:6059:c2f2:4f94/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever
    inet6 fe80::75c0:73c1:af3e:a5c5/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever
    inet6 fe80::cea:108:8cd9:1808/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever

在这里插入图片描述

查看lb02地址信息
[root@localhost nginx]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN qlen 1
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:42:6e:1d brd ff:ff:ff:ff:ff:ff
    inet 192.168.50.143/24 brd 192.168.50.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet6 fe80::d324:6059:c2f2:4f94/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever
    inet6 fe80::75c0:73c1:af3e:a5c5/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever
    inet6 fe80::cea:108:8cd9:1808/64 scope link tentative dadfailed 
       valid_lft forever preferred_lft forever
//验证地址漂移（lb01中使用pkill nginx，再在lb02中使用ip a 查看）
//恢复操作（在lb01中先启动nginx服务，再启动keepalived服务）
//nginx站点/usr/share/nginx/html
验证地址漂移（lb01中使用pkill nginx，再在lb02中使用ip a 查看）

在这里插入图片描述
开始修改node节点配置文件统一VIP（bootstrap.kubeconfig,kubelet.kubeconfig）

[root@localhost cfg]# vim /opt/kubernetes/cfg/bootstrap.kubeconfig
[root@localhost cfg]# vim /opt/kubernetes/cfg/kubelet.kubeconfig
[root@localhost cfg]# vim /opt/kubernetes/cfg/kube-proxy.kubeconfig

//统统修改为VIP
server: https://192.168.50.100:6443

[root@localhost cfg]# systemctl restart kubelet.service 
[root@localhost cfg]# systemctl restart kube-proxy.service 

//替换完成直接自检
[root@localhost cfg]# grep 100 *
bootstrap.kubeconfig:    server: https://192.168.50.100:6443
kubelet.kubeconfig:    server: https://192.168.50.100:6443
kube-proxy.kubeconfig:    server: https://192.168.50.100:6443

在lb01上查看nginx的k8s日志

[root@localhost ~]# tail /var/log/nginx/k8s-access.log 
192.168.50.141 192.168.50.139:6443 - [09/Feb/2020:11:18:41 +0800] 200 1120
192.168.50.141 192.168.50.150:6443 - [09/Feb/2020:11:18:41 +0800] 200 1120
192.168.50.140 192.168.50.139:6443 - [09/Feb/2020:11:18:56 +0800] 200 1120
192.168.50.140 192.168.50.139:6443 - [09/Feb/2020:11:18:56 +0800] 200 1120

在master01上操作

//测试创建pod
[root@localhost ~]# kubectl run nginx --image=nginx
kubectl run --generator=deployment/apps.v1beta1 is DEPRECATED and will be removed in a future version. Use kubectl create instead.
deployment.apps/nginx created

//查看状态
[root@localhost ~]# kubectl get pods
NAME                    READY   STATUS              RESTARTS   AGE
nginx-dbddb74b8-nf9sk   0/1     ContainerCreating   0          33s   //正在创建中
[root@localhost ~]# kubectl get pods
NAME                    READY   STATUS    RESTARTS   AGE
nginx-dbddb74b8-hhkfm   1/1     Running   0          28s  //创建完成，运行中

//注意日志问题
[root@localhost ~]# kubectl logs nginx-dbddb74b8-hhkfm

[root@localhost ~]# kubectl create clusterrolebinding cluster-system-anonymous --clusterrole=cluster-admin --user=system:anonymous
clusterrolebinding.rbac.authorization.k8s.io/cluster-system-anonymous created

查看pod网络

[root@localhost ~]# kubectl get pods -o wide
NAME                    READY   STATUS    RESTARTS   AGE     IP           NODE             NOMINATED NODE
nginx-dbddb74b8-hhkfm   1/1     Running   0          2m36s   172.17.0.2   192.168.50.141   <none>

在对应网段的node（192.168.50.141）节点上操作可以直接访问

[root@localhost cfg]# curl 172.17.0.2
<!DOCTYPE html>
<html>
<head>
<title>Welcome to nginx!</title>
<style>
    body {
        width: 35em;
        margin: 0 auto;
        font-family: Tahoma, Verdana, Arial, sans-serif;
    }
</style>
</head>
<body>
<h1>Welcome to nginx!</h1>
<p>If you see this page, the nginx web server is successfully installed and
working. Further configuration is required.</p>

<p>For online documentation and support please refer to
<a href="http://nginx.org/">nginx.org</a>.<br/>
Commercial support is available at
<a href="http://nginx.com/">nginx.com</a>.</p>

<p><em>Thank you for using nginx.</em></p>
</body>
</html>

master01查看日志

[root@localhost ~]# kubectl logs nginx-dbddb74b8-hhkfm
172.17.0.1 - - [09/Feb/2020:03:29:10 +0000] "GET / HTTP/1.1" 200 612 "-" "curl/7.29.0" "-"
Yplayer001
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Kubernetes（二）集群部署---etcd
Gloom丿郁的博客
04-12 161
Kubernetes（二）集群部署 文章目录Kubernetes（二）集群部署前景：K8S全部配完所需的主机自签 SSL 证书Kubernetes二进制部署环境部署master1下载证书制作工具开始制作证书定义ca证书实现证书签名生产证书，生成ca-key.pem ca.pem指定etcd三个节点之间的通信验证生成ETCD证书 server-key.pem server.pem证书拷贝node1节点和node2节点都需要修改node1node2启动 前景： 官方提供的三种部署方式 Kuberne
Kubernetes集群部署（2）——Kubernetes部署
weixin_21583810的博客
06-19 200
文章目录1.实验环境2.搭建私有仓库3. server2和server3和server4分别安装docker4.安装部署软件kubeadm5.模拟故障 1.实验环境 主机 功能 172.25.20.1 habor仓库 172.25.20.2 集群master 172.25.20.3 集群slave 172.25.20.4 集群slave 关闭节点的selinux和iptables防火墙 • 所有节点部署docker引擎 master节点的虚拟机内存最少2G，CPU至少双核。
Kubernetes(K8s) —— 容器编排管理技术
时间静止
06-28 1850
安装虚拟机 需要安装3台centos7 的虚拟机, 一台作为k8s的主节点, 另外两台作为其他节点. 虚拟机的安装步骤如下图简介: 1. 安装vm软件, 并通过镜像文件(.iso)安装centos7操作系统. 下面将展示一台虚拟机安装(vm, 以及镜像文件在底部通过百度云分享) 新建虚拟机 新建虚拟机-> 新建虚拟机向导->典型模式安装->安装程序光盘映像文件 个性化linux配置 配置linux 除root 用户外的用户. 三个虚拟机的名称依次为(master, node1,
简单易懂的Kubernetes（K8S）多节点二进制部署详细步骤
Gengchenchen的博客
04-14 317
文章目录==-----master02部署-----==1、关闭防火墙和selinux服务==-----在master01上操作-----==1、复制kubernetes目录到master022、复制master中的三个组件启动脚本kube-apiserver.service 、 kube-controller-manager.service 、kube-scheduler.service3、拷贝master01上已有的etcd证书给master02使用（==特别注意：master02一定要有etcd证书=
kubernetes认证、授权、准入控制
weixin_38320674的博客
07-05 1775
微信公众号搜索linux全栈技术，即可关注我的公众号，也可通过扫描文章最后的二维码关注，每天都会分享技术文章供大家参考阅读~，拥抱开源，同大家共同进步~前言k8s对我们整个系统的认证，...
部署kubernetes 集群——二进制方式(二)
weixin_45507491的博客
02-27 334
部署kubernetes 在部署Kubernetes之前一定要确保etcd、flannel、docker是正常工作的，否则先解决问题再继续！！！ 不说就是在master节点做 生成kubernete证书 1）创建CA证书： cat ca-config.json { "signing": { "default": { "expiry": "87600h" }, ...
Kubernetes -- Server 部署
weixin_30457881的博客
03-17 132
1.Node 节点配置文件 1.1 下载相关的软件 wget https://dl.k8s.io/v1.13.1/kubernetes-server-linux-amd64.tar.gz wget https://dl.k8s.io/v1.13.1/kubernetes-client-linux-amd64.tar.gz 上面的 client 包里只有一个 kubect...
kubernetes-server-linux-amd64.tar.gz
05-12
描述中的“**二进制搭建K8S集群**”意味着我们将探讨如何使用这些二进制文件手动构建一个Kubernetes集群。 首先，要搭建Kubernetes集群，我们需要准备至少一台主节点（Master Node）和至少一台工作节点（Worker ...
kubernetes-server-linux-amd64.tar
01-17
首先，"kubernetes-server-linux-amd64.tar"是Kubernetes集群服务器的Linux AMD64架构版本的二进制文件包。这个压缩包包含了运行Kubernetes集群所需的全部核心组件，如kube-apiserver、kube-controller-manager、...
CentOS7 使用二进制部署 Kubernetes 1.13集群-附件资源
03-02
CentOS7 使用二进制部署 Kubernetes 1.13集群-附件资源
kubernetes-server-linux-amd64.tar 二进制安装包
08-28
这个"**kubernetes-server-linux-amd64.tar**"文件是一个针对Linux平台（AMD64架构）的Kubernetes二进制安装包，版本为1.27.1。在这个压缩包中，你将找到运行Kubernetes集群所需的所有核心组件，包括控制平面组件和...
前端Docker部署 http / https服务&使用 iframe嵌套页面遇到的问题&页面403 Forbidden问题
Alice_hhu的博客
05-05 4656
中心思想：先部署 http服务，再部署 https服务转发到 http服务上
搭建Kubernetes时容易遇到的问题
runningofsnail的博客
06-20 7880
参考链接：https://www.cnblogs.com/chiwg/p/5009516.html因为网上关于如何搭建kubernetes的文章很多(刘天斯大神的很不错 链接：http://blog.liuts.com/post/247/)所以具体过程我就不再叙述了，我只说我在搭建过程中遇到的问题。我的集群主机系统版本为：centos7我使用的etcd版本为：etcd-0.4.6-7.el7.ce...
大学生挑战杯-喜树根器官培养和抗癌物质喜树碱生成的研究.rar
07-26
大学生挑战杯-喜树根器官培养和抗癌物质喜树碱生成的研究.rar
b278视频及游戏管理平台-springboot+vue.zip（可运行源码+sql文件+）
07-26
视频及游戏管理平台是一个很好的项目，结合了后端（Spring Boot）和前端（Vue.js）技术，实现了前后端分离。 视频及游戏管理平台是一个很好的项目，结合了后端（Spring Boot）和前端（Vue.js）技术，实现了前后端分离。 视频及游戏管理平台是一个很好的项目，结合了后端（Spring Boot）和前端（Vue.js）技术，实现了前后端分离。 视频及游戏管理平台是一个很好的项目，结合了后端（Spring Boot）和前端（Vue.js）技术，实现了前后端分离。 视频及游戏管理平台是一个很好的项目，结合了后端（Spring Boot）和前端（Vue.js）技术，实现了前后端分离。 视频及游戏管理平台是一个很好的项目，结合了后端（Spring Boot）和前端（Vue.js）技术，实现了前后端分离。
大模型应用-为Ollma开发的简单的HTML网页UI应用-附项目源码-优质项目实战.zip
07-26
大模型应用_为Ollma开发的简单的HTML网页UI应用_附项目源码_优质项目实战
基于JAVA局域网监听软件的设计与开发(源代码+论文).rar
07-26
基于JAVA局域网监听软件的设计与开发(源代码+论文).rar
小程序-光影娱乐带后台（源码）.zip
最新发布
07-26
小程序-光影娱乐带后台（源码）.zip
基于Cadence的模块化电路设计与应用研究
07-26
在当前电子产品的需求不断扩大尧更新频率持续加快的形势下袁电路模块化设计成为了提高电子产 品设计效率尧最大化降低研制成本极其重要且有效的实施途径遥通过对模块化电路设计流程进行分析袁系统地 梳理出了Cadence软件下模块化电路设计的实现方式袁以及基于Capture CIS 的模块化电路调用方法袁为广大设 计师开展产品模块化电路设计提供了方法参考遥
手动部署Kubernetes v1.12二进制集群详解
"该资源是关于Kubernetes v1.12版本的手动二进制部署集群的指南，涉及操作系统CentOS7.5_x64，Docker 18.09.0，以及Kubernetes 1.12的组件安装与配置。文中提到了三种部署Kubernetes集群的方式：Minikube、kubeadm和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值