k8s 部署文档

已于 2022-04-13 10:30:28 修改
阅读量735 收藏
点赞数
文章标签： linux docker 运维
于 2022-03-11 17:23:02 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44926931/article/details/123429944
版权

K8S环境部署

一、master部署

1、配置hosts文件

vim /etc/hosts

10.200.124.177      ECFDP-DW-AW1-01

10.200.124.178      ECFDP-DW-AW2-01

10.200.124.179      ECFDP-DW-AW3-01

10.200.124.180      ECFDP-DW-AW4-01

10.200.124.181      ECFDP-DW-AW1-02-01

10.200.124.182      ECFDP-DW-AW2-02-01

10.200.124.183      ECFDP-DW-AW3-02-01

10.200.124.184      ECFDP-DW-AW4-02-01

备注：

User：root
Pass:  XXXXXX 

2、设置对应hostname

hostnamectl set-hostname --static ECFDP-DW-AW1-01

hostnamectl set-hostname --transient  ECFDP-DW-AW1-01

3、关闭firewalld，并设置开机不启动。

systemctl stop firewalld

systemctl disable firewalld

4、关闭swap

swapoff -a

sed -i '/ swap /  s/^\(.*\)$/#\1/g' /etc/fstab

5、关闭selinux

sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config

6、修改支持k8s的内核参数

cat > /etc/sysctl.d/k8s.conf <<EOF

net.bridge.bridge-nf-call-ip6tables = 1

net.bridge.bridge-nf-call-iptables = 1

net.ipv4.ip_forward = 1

EOF

7、开启br_netfilter

modprobe br_netfilter

sysctl -p /etc/sysctl.d/k8s.conf

8、安装依赖工具包：

cd /ecfdpuser/k8s_c75-sign_install

tar xvf rpms/util_rpm.tar.gz

rpm -ivh --replacefiles --replacepkgs util_rpm/*.rpm

9、安装docker

cd /ecfdpuser/k8s_c75-sign_install

tar xvf rpms/docker_rpm.tar.gz

rpm -ivh --replacefiles --replacepkgs docker_rpm/*.rpm

10、设置dockercgroupdriver

cat > /etc/docker/daemon.json <<EOF

{

"exec-opts": ["native.cgroupdriver=systemd"]

}

EOF

11、启动docker

systemctl enable docker.service

systemctl start docker.service

12、安装k8s

tar xvf rpms/k8s_rpm.tar.gz

rpm -ivh --replacefiles --replacepkgs k8s_rpm/*.rpm

13、导入docker image

docker load -i imgs/k8s_18.tar

docker load -i imgs/dashboard2.tar

14、初始化集群

kubeadm init \

    --kubernetes-version=v1.18.2 \

    --apiserver-advertise-address 172.20.10.6 \

    --pod-network-cidr=10.244.0.0/16

sha256 编码获取

openssl x509 -pubkey -in /etc/kubernetes/pki/ca.crt | openssl rsa -pubin -outform der 2>/dev/null | openssl dgst -sha256 -hex | sed 's/^.* //'

        

15、配置kubectl配置文件

mkdir -p $HOME/.kube

cp -i /etc/kubernetes/admin.conf $HOME/.kube/config

chown $(id -u):$(id -g) $HOME/.kube/config

systemctl enable kubelet.service

systemctl start kubelet.service

16、安装flannel网络组件

mkdir -p /run/flannel/

cat >> /run/flannel/subnet.env << EOF

FLANNEL_NETWORK=10.244.0.0/16

FLANNEL_SUBNET=10.244.0.1/24

FLANNEL_MTU=1450

FLANNEL_IPMASQ=true

EOF

kubectl apply -f yamls/kube-flannel.yml   （这yml文件里要注意实际网卡名称，否则报错）

kubectl get pod --all-namespaces

二、node节点部署

1、修改hosts

vim /etc/hosts

10.200.124.177      ECFDP-DW-AW1-01

10.200.124.178      ECFDP-DW-AW2-01

10.200.124.179      ECFDP-DW-AW3-01

10.200.124.180      ECFDP-DW-AW4-01

10.200.124.181      ECFDP-DW-AW1-02-01

10.200.124.182      ECFDP-DW-AW2-02-01

10.200.124.183      ECFDP-DW-AW3-02-01

10.200.124.184      ECFDP-DW-AW4-02-01

2、关闭防火墙

systemctl stop firewalld

systemctl disable firewalld

 3、关闭swap

swapoff -a

sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab

4、关闭selinux

sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config

 5、修改支持k8s的内核参数

cat > /etc/sysctl.d/k8s.conf <<EOF

net.bridge.bridge-nf-call-ip6tables = 1

net.bridge.bridge-nf-call-iptables = 1

net.ipv4.ip_forward = 1

EOF

6、开启br_netfilter

modprobe br_netfilter

sysctl -p /etc/sysctl.d/k8s.conf

7、安装依赖工具包：

cd /ecfdpuser/k8s_c75-sign_install

tar xvf rpms/util_rpm.tar.gz

rpm -ivh --replacefiles --replacepkgs util_rpm/*.rpm

8、安装docker

cd /ecfdpuser/k8s_c75-sign_install

tar xvf rpms/docker_rpm.tar.gz

rpm -ivh --replacefiles --replacepkgs docker_rpm/*.rpm

9、设置dockercgroupdriver

cat > /etc/docker/daemon.json <<EOF

{

"exec-opts": ["native.cgroupdriver=systemd"]

}

EOF

10、启动docker

systemctl enable docker.service

systemctl start docker.service

  1. 安装k8s

cd /ecfdpuser/k8s_c75-sign_install

tar xvf rpms/k8s_rpm.tar.gz

rpm -ivh --replacefiles --replacepkgs k8s_rpm/*.rpm

12、导入docker image

docker load -i imgs/k8s_18.tar

docker load -i imgs/dashboard2.tar

13、安装flannel网络组件

mkdir -p /run/flannel/

cat >> /run/flannel/subnet.env << EOF

FLANNEL_NETWORK=10.244.0.0/16

FLANNEL_SUBNET=10.244.0.1/24

FLANNEL_MTU=1450

FLANNEL_IPMASQ=true

EOF

14、加入k8s-master

kubeadm token list  查看token

3v38rf.6gyx26pc40r91a6f

kubeadm join 172.20.10.6:6443 --token 3v38rf.6gyx26pc40r91a6f

15、重启k8s服务

systemctl enable kubelet.service

systemctl start kubelet.service

三、dashboard部署

1、安装

cd /ecfdpuser/k8s_c75-sign_install

kubectl apply -f yamls/dashboard2_recommended.yaml

kubectl apply -f yamls/dashboard2_admin.yaml

查看登录oken：

kubectl describe secret dashboard -n kube-system

记录token

浏览器访问https://10.200.124.177:30000

2、设置账号密码登录

（1）生成密码文件

echo 'admin,admin,1' > /etc/kubernetes/pki/basic_auth_file

（2）编辑/etc/kubernetes/manifests/kube-apiserver.yaml，在- command:下面增加- --basic-auth-file=/etc/kubernetes/pki/basic_auth_file参数：

vim /etc/kubernetes/manifests/kube-apiserver.yaml

...

spec:

  containers:

  - command:

    - kube-apiserver

    - --advertise-address=10.1.0.160

......

    - --basic-auth-file=/etc/kubernetes/pki/basic_auth_file

......

（3）重启api-server

cd /etc/kubernetes/manifests

mv ./kube-apiserver.yaml ../

mv ../kube-apiserver.yaml ./

（4）更新api-server配置

kubectl apply -f /etc/kubernetes/manifests/kube-apiserver.yaml

（5）将用户与权限绑定

kubectl create clusterrolebinding  login-on-dashboard-with-cluster-admin  --clusterrole=cluster-admin --user=admin

查看绑定：

kubectl get clusterrolebinding login-on-dashboard-with-cluster-admin

6、修改dashboard2_recommended.yaml

开启authentication-mode=basic配置:

vim /ecfdpuser/k8s_c75_sign_instal/yamls/dashboard2_recommended.yaml

增加：

--token-ttl=43200

--authentication-mode=basic

args:

  - --auto-generate-certificates

  - --namespace=kubernetes-dashboard

  - --token-ttl=43200

  - --authentication-mode=basic

7、更新dashboard2_recommended.yaml

kubectl apply -f /data/k8s_c75_sign_instal/yamls/kubernetes-dashboard.yaml

注意：

生成密码文件的时候，basic验证方式要求用户名和密码要保持一致,id不能重复。

/etc/kubernetes/pki/basic_auth_file文件不会热更新,每次添加新用户之后都需要手动重启一下api-server。

要通过火狐浏览器访问dashboard。

四、Jenkins配置

登录10.200.124.184服务器操作：

cd /data/k8s_c75_sign_install/rpms

安装JDK支持

rpm -ivh jdk-8u251-linux-i586.rpm

cp jenkins.war apache-tomcat-8.5.55/webapps/

cd apache-tomcat-8.5.55/bin/

./startup.sh

通过访问 http://10.200.124.184:8080/jenkins 访问Jenkins

首次访问需要根据屏幕提示设置密码

cat /root/.jenkins/secrets/initialAdminPassword

五、Nexus 配置方法

登录服务器10.200.124.184服务器操作：

cd /data/k8s_c75_sign_install/rpms

tar xvf nexus-3.23.0-03-unix.tar.gz

sed -i 's/run_as_root=true/run_as_root=false/' nexus-3.23.0-03/bin/nexus

./nexus-3.23.0-03/bin/nexus start

* 通过访问 http://10.200.124.184:8081访问Nexus

* 首次访问：

登录名：admin  

密码服务器中查看：# cat sonatype-work/nexus3/admin.password

六、服务部署：

在master（10.200.124.177）主节点操作：

cd /ecfdpuser/seaboxdata/local-path_install

kubectl apply -f local-path-storage.yaml

执行：

kubectl patch storageclass local-path -p '{"metadata": {"annotations":{"storageclass.kubernetes.io/is-default-class":"false"}}}'

=========================================================================

部署mongodb

cd /ecfdpuser/seaboxdata/5_base-services/03_mongodb

执行以下命令:

kubectl apply -f mongodb-pv.yaml

kubectl apply -f deployment.yaml

验证是否部署成功:

kubectl get pod -n default

===============================================================================

部署redis

执行以下命令:

cd /ecfdpuser/seaboxdata/5_base-services/04_redis

kubectl apply -f deployment.yaml

===============================================================================

部署elasticsearch

cd /ecfdpuser/seaboxdata/5_base-services/05_elasticsearch

kubectl create  configmap es-config --from-file=./elasticsearch.yml

kubectl apply -f elasticsearch-pv.yaml

kubectl apply -f deployment.yaml

验证部署是否成功：

kubectl get pod -n default

安装orientdb

cd /ecfdpuser/seaboxdata/5_base-services/06_orientdb

kubectl apply -f orient-pv.yaml

kubectl apply -f deployment.yaml

验证:

kubectl get pod -n default

部署rockermq

cd /ecfdpuser/seaboxdata/5_base-services/07_rocketmq/console

kubectl apply -f deployment.yaml

cd /data/seaboxdata/5_base-services/07_rocketmq/broker

kubectl apply -f broker/broker-pv.yaml

kubectl apply -f deployment.yaml

cd /ecfdpuser/seaboxdata/5_base-services/07_rocketmq/name-server

kubectl apply -f ns-pv.yaml

kubectl apply -f deployment.yaml

检查是否发布成功:

kubectl get pod -n default

部署ambry

cd /ecfdpuser/seaboxdata/5_base-services/08_ambry

kubectl apply -f ambry-server-pv.yaml

kubectl apply -f server-deployment.yaml

kubectl apply -f ambry-client-pv.yaml

kubectl apply -f client-deployment.yaml

部署mysql

cd /ecfdpuser/seaboxdata/5_base-services/02_mysql

kubectl apply -f mysql-pv.yaml

kubectl apply -f deployment.yaml

kubectl get pod -n default

部署数据管控系统，权限认证中心

kubectl create namespace deploy

然后执行:

kubectl label node ecfdp-dw-aw1-01 ecfdp-dw-aw1-02-01 ecfdp-dw-aw2-01 ecfdp-dw-aw2-02-01 ecfdp-dw-aw3-01 ecfdp-dw-aw3-02-01 ecfdp-dw-aw4-01 env=deploy

部署eureka

cd /ecfdpuser/seaboxdata/7_eureka-service

kubectl apply -f eureka-service.yaml

查看是否部署成功:

kubectl get pod -n deploy

部署jvm及timezone

cd /ecfdpuser/seaboxdata/jvm/jvm

kubectl apply -f jvm.yaml

cd /ecfdpuser/seaboxdata/jvm

kubectl create configmap time-config --from-file=./timezone -n deploy

验证是否创建成功：

kubectl get configmap -n deploy

部署数据管控，权限认证中心

cd /ecfdpuser/seaboxdata/6_ej-service/server/

sh install-configmap.sh auth-frontier-service auth-service dqs-service ds-service mds-service tag-service usercenter-service kc-service pmc-service workflow-service mds-all-frontier-service

使用以下命令验证configmap是否部署成功

kubectl get configmap -n deploy

部署前端应用

创建前端configmap:

cd /ecfdpuser/seaboxdata/6_ej-service/webapp/runtimes/dev-ceb/

kubectl create -n deploy configmap ac-runtime-args --from-file=./ac-webapp

kubectl create -n deploy configmap ds-runtime-args --from-file=./ds-webapp

kubectl create -n deploy configmap mds-runtime-args --from-file=./mds-webapp

kubectl create -n deploy configmap dqs-runtime-args --from-file=./dqs-webapp

kubectl create -n deploy configmap kc-runtime-args --from-file=./kc-webapp

kubectl create -n deploy configmap login-runtime-args --from-file=./login

cd /ecfdpuser/seaboxdata/6_ej-service/webapp/deploy/

kubectl apply -f ac-deployment.yaml

kubectl apply -f login-deployment.yaml

kubectl apply -f mds-deployment.yaml

kubectl apply -f ds-deployment.yaml

kubectl apply -f dqs-deployment.yaml

kubectl apply -f kc-deployment.yaml

可通过以下命令查看是否部署成功：

 kubectl get pod -n deploy

初始化操作：

初始化orientdb数据库

进入orientdb数据库管理页面 地址为:http://10.200.124.177:30007

点击 NEW DB ->

ame项填mds_server_deploy

user项填 root

ServerPassword项填 root

->点击CREATE DATABASE 创建数据库

在主服务器上进入MDS_SERVER的pod中执行：

kubectl exec -it mds-service-749855b994-l7g5w -n deploy bas

curl -X GET http://10.96.41.153:8080/admin/graph/initSchema?token=ewekii1ecoiShae7Xuephoruh

curl -X GET http://10.96.41.153:8080/admin/tmpfile/init?token=ewekii1ecoiShae7Xuephoruh

curl -X GET http://10.96.41.153:8080/admin/es/init?token=ewekii1ecoiShae7Xuephoruh

dqs初始化：

kubectl exec -it dqs-service-8778bf57d-kjbwl  -n deploy bash

curl -X GET http://10.96.218.157:8080/admin/es/initExecution?token=DqsText

curl -X GET http://10.96.218.157:8080/admin/es/initSchedule?token=DqsText

王有坤
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
K8s集群所有细节部署文档
12-19
别的不说，k8s入门部署集群，这一篇就够了，不用看其他的
搭建一个完整的K8S集群部署文档.docx
12-21
详细的K8S集群部署手册
【prometheus】k8s集群部署prometheus server
康师傅没有眼泪
03-18 3925
Prometheus是一个开源的系统监控和报警系统，现在已经加入到CNCF基金会，成为继k8s之后第二个在CNCF托管的项目，在kubernetes容器管理系统中，通常会搭配prometheus进行监控，同时也支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。
K8S部署+实战+集群架构图.zip
08-11
K8S部署+实战+集群架构图，一共是5个文件，3个架构图+1个部署文档+1个实战文档。
doris阿里云K8s部署文档
08-30
doris通过阿里云K8s部署文档
k8s部署文档.docx
09-18
k8s部署
yarn和k8s(kubernetes)混合部署初步方案（利用cgroup资源限制）
monkeyboy_tech的博客
03-09 3513
版本 yarn 2.6.0 k8s v1.15.2 背景 随着k8s的越来越火热以及k8s的可扩展以及自修复优势，k8s势必是互联网的优势，但是很大一部分公司的资源管理工具依旧是yarn，而且yarn和k8s也必然并行很久一段时间， 但是由于yarn的隔离型相对于k8s来说还是很弱的，好在yarn 2.6.0版本也集成了LinuxContainerExecutor（默认是DefaultContainerExecutor），也就是说yarn在好长一段时间是不支持cpu限制的，LinuxContainerExe
k8s部署详细说明
Grey_fantasy的博客
06-19 2237
k8s部署详细说明
Kubernetes（k8s）入门及集群部署文档
秃了也弱了
07-10 3176
Kubernetes 简称 k8s。是用于自动部署，扩展和管理容器化应用程序的开源系统。 中文官网：https://kubernetes.io/zh/ （推荐！中文官方文档，查阅起来很详细方便） 中文社区：https://www.kubernetes.org.cn/ 官方文档：https://kubernetes.io/zh/docs/home/ 社区文档：http://docs.kubernetes.org.cn/ 传统部署时代 --> 虚拟化部署时代 --> 容器部署时代服务发现和负载均衡Kuberne
Apache Flink 进阶（四）：Flink on Yarn / K8s 原理剖析及实践
Ververica的博客
10-15 4026
本文根据 Apache Flink 进阶篇系列直播课程整理而成，由阿里巴巴技术专家周凯波（宝牛）分享，主要介绍 Flink on Yarn / K8s 的原理及应用实践，...
K8S简单学习文档
最新发布
野猪王的博客
05-12 667
上段代码为Linux中创建一个新进程的代码，返回pid该段代码中的CLONE_NEWPID会“误导”进程，认为自己是当前容器里的1号进程，既看不到宿主机里的真正进程空间，也看不到其他PID NameSpace里的具体情况。NameSpace实际上只修改了应用看待计算机“视图”，即它的“视线”被操作系统做了限制，只能“看到”某些指定的内容。Master组件的YAML文件会被生成在/etc/kubernetes/manifests路径下。
阿里云k8s部署文档，包括购买类型，发布脚本
10-18
k8s部署文档，发布java,c++服务步骤，nginx,ingress配置
K8S部署InfluxDB 1.8.4完整教程文档.md
04-22
K8S部署InfluxDB教程文档.md
kubernetes部署文档
03-25
kubernetes部署文档
k8s-阿里云部署文档.docx
07-21
k8s-阿里云部署文档.docx
K8s安装部署文档说明记录
06-29
K8s安装部署文档说明记录，适用于初学者安装调试部署参考材料
K8s集群部署（kubeadm安装部署详细手册）
abc
03-24 358
K8s部署主要有两种方式： 1、Kubeadm 　　Kubeadm是一个K8s部署工具，提供kubeadm init和kubeadm join，用于快速部署Kubernetes集群。 2、二进制 　　从github下载发行版的二进制包，手动部署每个组件，组成Kubernetes集群。 本文通过kudeadm的方式在centos7上安装kubernetes集群。
大数据_Flink_数据处理_yarn和k8s平台的flink部署---Flink工作笔记0015
添柴程序猿的专栏
02-26 576
上一节我们已经学习了，怎么使用命令行来提交job集群，但是这样是有问题的。 因为在上一节中，我们为了要运行一个我们写的WordCountStream这个任务。由于资源不够了，我们主动去终止了之前上传的另外一个资源。释放了资源以后，有4个资源了，这个任务才能运行起来。 在实际的应用当中，我们肯定不能这样做，如果每次都需要主动去终止其他任务来获取资源，这样太繁琐了，我们需要的是当我们有任务需要运行的时候。他立刻就能获取资源，然后进行运行。所以我们一般把flink和hadoop k8s yarn一块来..
Kubernetes部署文档--附件
DY1316434466的博客
04-29 539
1、etcd证书生成证书 cat ca-config.json { "signing": { "default": { "expiry": "87600h" }, "profiles": { "www": { "expiry": "87600h", "usages": [ "sign...
尚硅谷k8s部署&devops文档
09-05
尚硅谷是一家提供技术培训的机构，他们提供了关于Kubernetes（简称为K8s）部署的相关培训。 Kubernetes是一个开源的容器编排平台，它可以简化应用的部署、管理和扩展。尚硅谷通过培训课程，帮助学员了解和掌握Kubernetes的部署过程。 在尚硅谷的K8s部署培训中，学员首先会了解Kubernetes的基本概念和核心组件，包括Master节点、Worker节点、Kubelet、kube-proxy等。然后，学员将学习如何使用工具和命令来安装和配置Kubernetes集群。这包括设置Master节点、添加Worker节点，并进行网络配置和安全性设置。 在培训过程中，学员还会学习如何使用Kubernetes的命令行工具和Web界面来管理集群，如创建和管理Pod、ReplicaSet、Deployment等。 此外，尚硅谷还会教授一些高级的Kubernetes部署技术，例如使用Helm来进行应用的打包和分发、使用Ingress来进行负载均衡和流量路由等。 尚硅谷的K8s部署培训不仅注重理论的讲解，还包括大量的实战演练和案例分析，使学员能够真正掌握Kubernetes的部署和使用。 总而言之，尚硅谷的K8s部署培训通过讲解和实践，帮助学员掌握Kubernetes的部署和管理技能，为他们在应用开发和运维中，提供了强大的容器编排工具。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

王有坤

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值