openshfit311搭建文档

最新推荐文章于 2021-07-25 20:57:07 发布
最新推荐文章于 2021-07-25 20:57:07 发布
阅读量253 收藏
点赞数
分类专栏： openshift 文章标签： 容器 devops
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lhc0602/article/details/109638436
版权

#无网环境下高可用openshift311 搭建记录

一、主机资源准备：

主机ip
master1192.168.100.2
master2192.168.100.3
master3192.168.100.4
router1192.168.100.5
router2192.168.100.6
infra1192.168.100.7
infra2192.168.100.8
ansible192.168.100.100
dns192.168.100.100
harbor192.168.100.100

二、ansible机器操作：

1、搭建harbor仓库
假设搭建好的harbor仓库地址为harbor.test.com

2、镜像下载（无网络环境下。可也配置代理，或者从有网环境下载镜像）
#镜像列表(主节点)
echo ‘docker.io/cockpit/kubernetes:latest
docker.io/openshift/origin-haproxy-router:v3.11
docker.io/openshift/origin-haproxy-router:v3.11.0
docker.io/openshift/origin-service-catalog:v3.11
docker.io/openshift/origin-service-catalog:v3.11.0
docker.io/openshift/origin-node:v3.11
docker.io/openshift/origin-node:v3.11.0
docker.io/openshift/origin-deployer:v3.11
docker.io/openshift/origin-node:v3.11.0
docker.io/openshift/origin-control-plane:v3.11
docker.io/openshift/origin-control-plane:v3.11.0
docker.io/openshift/origin-pod:v3.11
docker.io/openshift/origin-web-console:3.11
quay.io/coreos/etcd’ >image.txt &&
while read line; do docker pull $line ; done<image.txt

3、镜像打上tag后上传harbor仓库
while read line;do docker tag $line harbor.test.com/$line;done < image.txt

4、yum源配置（主要为了配置openshift的源，下面是用nexus搭建的私有的yum源）

[root@openshift311-tower ~]# cat /etc/yum.repos.d/nexus.repo 
[base]
name=CentOS-$releasever - Base
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/centos/$releasever/os/$basearch/
enabled=1
gpgcheck=0

[updates]
name=CentOS-$releasever - Updates
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/centos/$releasever/updates/$basearch/
enabled=1
gpgcheck=0

[extras]
name=CentOS-$releasever - Extras
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/centos/$releasever/extras/$basearch/
enabled=1
gpgcheck=0

[epel]
name=CentOS-$releasever - Epel
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/epel/$releasever/$basearch/
enabled=1
gpgcheck=0

[docker-ce-stable]
name=Docker CE Stable - $basearch
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/docker-ce/linux/centos/7/$basearch/stable
enabled=1
gpgcheck=0

[kubernetes]
name=Kubernetes
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=0

[openshift]
name=Openshift
baseurl=http://nexus3-cicd.apps.test.openshift.com/repository/yum/centos/$releasever/paas/$basearch/openshift-origin311/
gpgcheck=0

5、ansible安装（建议2.6.8版本，便于输出日志）
ansible下载地址：ftp://ftp.pbone.net/mirror/ftp.redhat.com/pub/redhat/linux/enterprise/7Server/en/Ansible/SRPMS/ansible-2.6.8-1.el7ae.src.rpm
安装： yum install ansible-2.6.8-1.el7ae.src.rpm

6、配置ansible主机能够免密登录其他主机

    创建ssh秘钥对，并将弓腰复制到其他需要免密登陆的主机上
	ssh-keygen -t rsa
	sh-copy-id -i ~/.ssh/id_rsa.pub root@master/router/infra

7、搭建dns服务器（使用dnsmasq）
dnsmasq配置文件目录：/etc/dnsmasq.conf
dnsmasq配置文件路径：可也看dnsmasq.conf中的conf-dir配置

    yum install dnsmasq
    systemctl start dnsmasq
    systemctl enable dnsmasq
    cd /etc/dnsmasq.d
    touch host.conf
 		[root@NewTower dnsmasq.d]# cat hosts.conf 
 		address=/master1.test.openshift.com/192.168.100.2
 		address=/master2.test.openshift.com/192.168.100.3
 		address=/master3.test.openshift.com/192.168.100.4
 		address=/router1.test.openshift.com/192.168.100.5
 		address=/router2.test.openshift.com/192.168.100.6
 		address=/node1.test.openshift.com/192.168.100.7
 		address=/node2.test.openshift.com/192.168.100.8
 		address=/master.test.openshift.com/192.168.100.100
 		address=/.apps.test.openshift.com/192.168.100.100
 		address=/harbor.test.com/192.168.100.100
    systemctl restart dnsmasq

配置好conf后重启
8、配置好dns服务后，配置resolve.conf文件（解析test.openshift.com）

	cat /etc/resolv.conf 
	search test.openshift.com
	nameserver 192.168.100.100

9、配置ansible inventory（参考https://github.com/openshift/openshift-ansible/blob/release-3.11/inventory/hosts.example）

[root@openshift311-tower ~]# cat /etc/ansible/hosts
[OSEv3:children]
#这里放openshfit的角色，这里有三个角色，master，node，etcd
masters
nodes
etcd

[OSEv3:vars]
#这里是openshfit的安装参数

#指定ansible使用ssh的用户为root
ansible_ssh_user=root

#指定方式为origin
openshift_deployment_type=origin

#指定版本为3.11
openshift_release=3.11

#openshift_enable_service_catalog=false
#openshift_clock_enabled=true
#openshift_disable_check=disk_availability,docker_storage,memory_availability,docker_image_availability

# don't install monitor
# openshift_cluster_monitoring_operator_install=false

# install and don't install
openshift_metrics_install_metrics=true
openshift_enable_service_catalog=false

# skip checking docker images & memory
openshift_disable_check=memory_availability,disk_availability,docker_storage_driver,docker_storage,package_availability,package_update,docker_image_availability

# docker registry
oreg_url=harbor.test.com/openshift/origin-${component}:${version}
openshift_examples_modify_imagestreams=true
openshift_docker_additional_registries=harbor.test.com/
openshift_docker_insecure_registries=harbor.test.com/
openshift_docker_options="-l warn --ipv6=false --insecure-registry=0.0.0.0/0 --registry-mirror=http://harbor.test.com/ --log-opt max-size=1M --log-opt max-file=3"

# domain
openshift_master_cluster_hostname=master.lhc.openshift.com
openshift_master_cluster_public_hostname=master.lhc.openshift.com
openshift_master_default_subdomain=apps.lhc.openshift.com

[masters]
master1.lhc.openshift.com
master2.lhc.openshift.com
master3.lhc.openshift.com

[etcd]
master1.lhc.openshift.com
master2.lhc.openshift.com
master3.lhc.openshift.com

[nodes]
#node角色的机器名称包含
#all-in-one openshift_node_group_name='node-config-all-in-one'
#master openshift_node_group_name='node-config-master'
#router openshift_node_group_name='node-config-infra'
#node   openshift_node_group_name='node-config-compute'
master1.lhc.openshift.com openshift_node_group_name='node-config-master'
master2.lhc.openshift.com openshift_node_group_name='node-config-master'
master3.lhc.openshift.com openshift_node_group_name='node-config-master'
router1.lhc.openshift.com openshift_node_group_name='node-config-infra'
router2.lhc.openshift.com openshift_node_group_name='node-config-infra'
node1.lhc.openshift.com   openshift_node_group_name='node-config-compute'
node2.lhc.openshift.com   openshift_node_group_name='node-config-compute'
#gluster[1:6].example.com openshift_node_group_name='node-config-compute-storage'

# openshiftclock_enabled=true
# ansible_service_broker_install=false

10、向其他ansible被管理节点推送resolve.conf文件

ansible all -m copy -a "src=/etc/resolve.conf dest=/etc/resolve.conf backup=yes"

11、向其他ansible被管理节点推送yum源

备份原有repo文件
ansible all -m file -a "path=/etc/yum.repos.d/backup state=directory"
ansible all -m shell -a "mv /etc/yum.repos.d/*.repo /etc/yum.repos.d/backup"

推送yum源文件
ansible all -m copy -a "src=/etc/yum.repos.d/nexus.repo dest=/etc/yum.repos.d"
ansible all -m shell -a "yum clean all &&yum makecache"

12、修改服务器selinux（操作后机器需要重启,否则部署过程中集群可能会死活起不来）

 ansible all -m shell -a 'sed -i "s/^SELINUX=disabled/SELINUX=permissive/g" /etc/selinux/config'
 ansible all -m shell -a "reboot"

##三、openshfit安装
1、从github上面下载openshift311的安装文件（ansible安装文件）
无网环境可以直接从网上下载
https://github.com/openshift/openshift-ansible/archive/release-3.11.zip

2、上传服务器解压

unzip openshift-ansible-release-3.11.zip
cd openshift-ansible-release-3.11

3、关闭openshift安装文件中的默认设置的yum源（安装过程中会通过ansible推送）

sed -i "s/^enabled=1/enabled=0/g" root/openshift-ansible-release-3.11/roles/openshift_repos/templates/CentOS-OpenShift-Origin311.repo.j2

4、关闭Enable the EPEL repo for installing Ansible（无网环境下需要关闭）
注释掉下面文件内容

vim /root/openshift-ansible-release-3.11/roles/openshift_repos/tasks/centos_repos.yml
#- name: Enable the EPEL repo for installing Ansible
#  yum:
#    name: "{{ openshift_epel_rpm_url }}"
#    state: present
#  notify: refresh cache

5、第四步操作后需要手动下载rpm文件（https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm）
epel-release-latest-7.noarch.rpm

ansible all -m copy -a "src=/root/epel-release-latest-7.noarch.rpm dest=/root"
ansible all -m shell -a "rpm -i /root/epel-release-latest-7.noarch.rpm"

6、运行ansible-playbook

#openshift安装环境检查
ansible-playbook playbooks/prerequisites.yml
#openshift部署
 ansible-playbook playbooks/deploy_cluster.yml

##四、排错思路：
1、安装过程中有报错的话可以查看节点日志tail -f /var/log/message，集群没起来前主要看master节点。
2、执行部署后如果卡在control-plane这一步的话，可能是镜像的问题（镜像版本不对，具体信息看master节点日志）
3、ansible执行过程中，有文件推送，有可能覆盖掉yum源，或者修改了 /etc/resolv.conf文件内容，这时候可以为resolv.conf文件加锁（ansible all -m shell -a “chattr +i /etc/resolv.conf”）
4、集群部署好之后可能镜像版本各种不对，需要自己看日志，确定使用的那个版本，然后打上对应的tag号

test-lhc
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
openshfit docker安装
10-28
红帽OpenShift 是一种容器应用平台,采用企业级 Kubernetes 技术构建,旨在帮助开发人员快速在云端开发、托管、扩展和交付应用。
centos7.6 使用 ansible 搭建 openshift 集群
Man_In_The_Night的博客
12-13 960
centos7.6 使用 ansible 搭建 openshift 集群 实验环境: 4 台 centos7.6 主机，一台作为 ansible 机器，一台 master，两台 node 节点 ansible 192.168.116.1 master 192.168.116.8 帐号密码：root/321321 node01 192.168.116.9 帐号密码：root/321321...
centos7下Openshift Origin高级安装
j_ychen的博客
04-10 2591
前期准备1. 修改主机名   确定主机名配置是否正确，可用hostnamectl修改主机名   # hostnamectl set-hostname master.example.com2. 启动网卡端口   # vi /etc/sysconfig/network-scripts/ifcfg-ens33     修改ONBOOT=yes     重启网卡systemctl restart netw...
如何搭建openshift-3.11的集群环境
xiaofeng_yan的专栏
05-13 2771
OS环境是centos 7.6，openshift版本3.11 1、首先建立如下的虚拟机 10.2.3.12 master1 10.2.3.13 master2 10.2.3.14 master3 10.2.3.15 node1 10.2.3.16 node2 10.2.3.17 nfs 10.2.3.18 lb 三个master，两个node，一个nfs（共享存储），一个l...
CentOS7.9上部署OpenShift3.11集群
xvktdmjg的博客
07-25 845
CentOS7.9上部署OpenShift3.11集群 OCP官网文档：https://docs.openshift.com/container-platform/3.11/welcome/index.html 版本： openshift 3.11.0 centos7.9 ansible 2.6.5 环境信息 主机名 IP 系统版本 配置 master.ocp.cn 192.168.108.110 CentOS 7.9 4C2G node1.ocp.cn 192.168.108.11
openshift 3.11安装
kwame211的博客
06-13 4403
开源openshift确实很坑人，今天折腾了一天，晚上重新开始，终于有些眉目了！ 本次安装使用环境 Hostname: master-openshift.example.com IP: 192.168.188.10 OS: centos74 Memory:32G CPU:2 Hostname: node-openshift.example.com IP: 192.168.188.20 OS: ...
xshell+xftp openshfit上传必备
03-28
xshell+xftp openshfit上传必备
openshift企业版管理开发详解视频.rar
02-08
│ 01.openshfit-课程介绍.mp4,网盘文件永久连接 │ 02.openshift-allinone-install.mp4 │ 03.openshift-快速安装后的配置操作.mp4 │ 04.openshift-简单使用客户端创建应用.mp4 │ 05.openshift-组件及其关系介绍....
openshift
03-14
openshift项目
快速安装openshift的步骤详解
09-30
今天小编就为大家分享一篇关于快速安装openshift的步骤详解，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
openshift-terraform：在各种云提供商上部署Openshift Origin 3.11集群
02-06
openshift-terraform：在各种云提供商上部署Openshift Origin 3.11集群
Openshift OKD v3.11 高级安装
热门推荐
运维求生之路
01-07 1万+
Openshift OKD v3.11 高级安装主机及角色规划安装注意事项官方建议集群所有主机的硬件规格和系统级要求。配置国内yum源，安装指定版本ansible 并做基础配置克隆openshift代码并切换分支配置centos-openshift源并同步到所有主机环境先决准备--yum源、NetworkManager、prerequisites.yml镜像准备在centos7.2系统中网络特殊配...
安装openshift v3.11版本全程记录
pingweicheng的博客
02-23 2648
第1步：先更新操作系统 yum -y upgrade 第2步：确认操作系统版本号 cat /etc/redhat-release 或 uname -r 第3步： 查看主机hosts文件配置 cat /etc/hosts 第4步：查看网络配置 ifconfig 第5步：查看主机域名 hostname 第6步：关闭防火墙 systemctl stop f...
openshift 3.11安装部署
weixin_30703911的博客
09-09 1423
openshift 3.11 安装部署 openshift安装部署 1 环境准备(所有节点) openshift 版本 v3.11 1.1 机器环境 ip cpu mem hostname OSsystem 192.168.1.130 4 16 master　　CentOS7.6 192.168.1...
CentOS7上安装Openshift 311
Jackel_yan的博客
11-23 3439
Openshift 311 学习环境安装 本文介绍的是一个测试环境的安装方法。我们安装的是一个Allinone的环境，也就是openshift所有的角色都安装在同一台机器上。如果你想安装一个真正的生产环境，也建议你先装一个allinone的openshift，这可以测试一下整个安装环境有没有问题。多节点的安装跟allinone的安装方法差别不大，只不过是把不同角色安装到了不同的节点上。 参考资料 ...
OpenShift——openshift 3.11 集群安装（亲测版，你懂的）
blueicex2017的博客
05-19 2260
1.节点规划 序号 ip 主机名 1 192.168.0.71 master 2 192.168.0.72 node1 3 192.168.0.731 node2 4 192.168.0.74 node3 5 192.168.0.75 etcd 6 192.168.0.77 resource 4core CPU，4G memory，40G system disk，20G docker vg，double netface 2. 资源主机搭建 主机：resource节点
Openshift-企业容器云落地-openshift3.11集群安装
adson1987的博客
05-14 5826
Openshift-企业容器云落地-openshift集群安装节点规划DNS搭建所有节点：配置ETCD节点：配置Master节点1、Master安装epel：2、安装ansible pyOpenSSL:3、配置各个节点和master节点的互信4、下载openshift-ansible源码5、配置ansible6、下载如下docker镜像，并上传到私有镜像仓库中.(离线安装使用)7、开始安装集群8、...
OpenShift 3.11 OKD安装部署
Hello！C先生的博客
05-27 1657
#openshift 3.11 安装部署 openshift安装部署 ###1 环境准备(所有节点) openshift 版本 v3.11 1.1 机器环境 ip cpu mem hostname OSsystem 172.16.1.91 4 8 node01　　CentOS7.6 172.16.1.92 4 8 node02　　CentOS7.6 172.16.1.93 4 8 node03　　CentOS7.6 ...
[OpenShift]多节点的安装V3.11.0
weixin_30486037的博客
06-24 254
系统版本 主机IP 主机名CentOS7 1810 192.168.2.4 master01.example.comCentOS7 1810 192.168.2.5 node01.example.comCentOS7 1810 192.168.2.6 node02.example.com 安装依赖，在所有节点上执行 所有节点 [root@master01 ~]# yum ins...
openshfit怎么部署一个java开发的API服务？
最新发布
02-12
OpenShift 部署 Java 开发的 API 服务的步骤如下： ... 2. 创建应用：登录 OpenShift 控制台，并创建一个新的应用。在“选择您的应用类型”部分中，选择 Java 应用类型。 3. 连接代码仓库：在应用创建后，您需要连接...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值