背景:
装系统相信大家都不陌生,对于运维攻城狮可以说是家常便饭,老大说:小刘今天装一下系统,明天把那几台机器系统重装一下。就这样一上午,一天就这么过去了。耗时费力不说,重点是没有效率,没错这就是我的痛点。一个好的运维工作时间清闲才说明你的工作做到位了。万一某天说小刘把100个新机器装一下系统。。。该如何彻底解放双手呢?
今天我们介绍一款无人值守自动化部署系统的软件Cobbler,真正是实现从机器上架,插上网线一切都交给Cobbler来完成
简介:
先介绍下Cobbler(补鞋匠),根据其名称可想而知。Cobbler是红帽(Red Hat)2008年推出的网络安装服务器套件 ,它大大降低 Linux 网络安装的技术门槛降,对于自动化运维可以必须要学的基础服务套件。
Cobbler是一款自动化操作系统部署的实现工具,由Python语言开发,是对PXE的二次封装。融合多种特性,提供了CLI和Web的管理形式。同时,Cobbler也提供了API接口,方便二次开发使用。它不仅可以安装物理机,同时也支持kvm、xen虚拟化、的安装。另外,它还能结合Puppet等集中化管理软件,实现自动化管理,同时还可以管理DHCP,DNS,以及yum包镜像。
Cobbler各个组件的关系(如下图)
通过 cobbler,可以轻松实现对RedHat/Centos/Fedora系统的快速部署,同时也支持Suse 和Debian(Ubuntu)系统。Cobbler集成的服务:
-
PXE服务支持
-
DHCP服务管理
-
DNS服务管理(可选bind,dnsmasq)
-
电源管理
-
Kickstart服务支持
-
YUM仓库管理
-
TFTP(PXE启动时需要)
-
Apache(提供kickstart的安装源,并提供定制化的kickstart配置)
结合这些集成服务,Cobbler工作流程:
环境:
Cobbler服务器:CentOS6.9 ---> IP:192.168.137.38
客户端(需要部署Linux系统及IP):
CentOS6.8 ---> IP地址段:192.168.137.100-254 DNS:8.8.8.8,8.8.4.4
CentOS7.4 ---> IP地址段:192.168.137.100-254 DNS:8.8.8.8,8.8.4.4
准备镜像文件
CentOS-7.4-x86_64
CentOS-6.8-x86_64
Cobbler服务端安装部署:
以下配置可用通过脚本自动安装配置,笔者写了个自动化部署脚本(github)地址:
https://github.com/Ljohn001/ljohn_ops/tree/master/cobbler
用着顺手记得给个Star,请赐予我力量吧,笔者的脚本功力还很弱,但脚本在CentOS68/69反复测了5-6遍才让它面世,这是一种苛求,亦是一种执着。
一:配置YUM源(epel)
Cobbler 集成服务需要epel,这里提供Aliyun的镜像
1
2
|
# cp -r /etc/yum.repos.d /etc/yum.repos.d.backup && rm -rf /etc/yum.repos.d/*
# wget -P /etc/yum.repos.d/ http://mirrors.aliyun.com/repo/{Centos-6.repo,epel-6.repo}
|
二:关闭服务端的防火墙及selinux
清除防火墙规则,并关闭(或者开放22 80 67 68 69 443 端口)
1
2
3
4
5
|
# iptables -F && /etc/inist.d/iptables stop
# chkconfig iptables off
关闭selinux
# setenforce 0
# sed -i '/^SELINUX=/ s/^SELINUX=.*/SELINUX=disabled/g' /etc/selinux/config
|
三:安装Cobbler集成服务
1
2
3
4
5
|
安装Cobbler 程序
# yum -y install cobbler cobbler-web tftp tftp-server xinetd dhcp httpd pykickstart mod_wsgi mod_ssl rsync
安装Cobbler 依赖程序
# yum -y install debmirror python-ctypes python-cheetah python-netaddr python-simplejson python-urlgrabber PyYAML syslinux cman fence-agents createrepo mkisofs yum-utils
debian
/ubuntu
系统需要 debmirror 软件包;想使用电源管理功能的话需要安装 cman 或fence-agents。
|
四:配置Cobbler及集成服务
#设置部署系统初始密码
1
2
|
# openssl passwd -1 -salt 'ljohn' '123456' # -salt 表示”加盐“ , ”ljohn“ 可以是任意字符
$1$ljohn$yBMDpKkntQ9jfV1ZAWKpU1
|
1、修改Coobler配置文件
1
2
3
4
5
6
7
8
|
# cp /etc/cobbler/settings{,.bak}
# sed -i 's@default_password_crypted: .*@default_password_crypted: "\$1\$ljohn\$yBMDpKkntQ9jfV1ZAWKpU1"@'/etc/cobbler/settings##注意$ 需要转义
# sed -i "s/server: 127.0.0.1/server: 192.168.137.38/g" /etc/cobbler/settings
# sed -i "s/next_server: 127.0.0.1/next_server: 192.168.137.38/g" /etc/cobbler/settings
# pxe安装 只允许一次,防止误操作( 在正式环境有用。实际测试来,这个功能可以屏蔽掉 )
# sed -i 's/pxe_just_once: 0/pxe_just_once: 1/g' /etc/cobbler/settings
# sed -i 's/manage_rsync: 0/manage_rsync: 1/g' /etc/cobbler/settings
# sed -i 's/manage_dhcp: 0/manage_dhcp: 1/g' /etc/cobbler/settings
|
2、配置debmirror
1
2
3
4
|
# debian/ubuntu 系统需要 debmirror 的配置
# cp /etc/debmirror.conf{,.bak}
# sed -i -e 's/@dists=.*/#@dists=/' /etc/debmirror.conf
# sed -i -e 's/@arches=.*/#@arches=/' /etc/debmirror.conf
|
3、修改httpd配置
1
2
3
|
# cp /etc/httpd/conf/httpd.conf{,.bak}
# sed -i "s/#ServerName www.example.com:80/ServerName 192.168.137.38:80/" /etc/httpd/conf/httpd.conf
# sed -i 's/#LoadModule/LoadModule/g' /etc/httpd/conf.d/wsgi.conf
|
4、修改tftp配置
1
|
# sed -i '/disable/c disable = no' /etc/xinetd.d/tftp
|
5、配置rsync
1
|
# sed -i -e 's/= yes/= no/g' /etc/xinetd.d/rsync
|
6、修改dhcp配置
1
2
3
4
5
|
# cp /etc/cobbler/dhcp.template{,.bak}
# sed -i 's/DHCPDARGS=.*/DHCPDARGS=eth0/' /etc/sysconfig/dhcpd
##将DHCP配置文件中的192.168.1部分修改为192.168.0,删除22,23行;并保存为原始文档。##
# sed -i.ori 's@192.168.1@192.168.137@g;22d;23d' /etc/cobbler/dhcp.template
#也可以通过vim /etc/cobbler/dhcp.template,查看dhcp配置文件
|
仅编辑修改部分
1
2
3
4
5
6
7
8
|
............
subnet 192.168.137.0 netmask 255.255.255.0 {
option subnet-mask 255.255.255.0;
range dynamic-bootp 192.168.137.100 192.168.137.254;
default-lease-
time
21600;
max-lease-
time
43200;
next-server $next_server;
............
|
7、配置cobbler启动服务,管理集成服务
设置开机启动:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
|
# chkconfig httpd on
# chkconfig xinetd on
# chkconfig cobblerd on
# chkconfig dhcpd on
# /etc/init.d/httpd restart
# /etc/init.d/xinetd restart
# /etc/init.d/cobblerd restart
cobbler SysV 服务脚本
cat
>
/etc/init
.d
/cobbler
<<EOF
#!/bin/bash
# chkconfig: 345 80 90
# description:cobbler
case
$1
in
start)
/etc/init
.d
/httpd
start
/etc/init
.d
/xinetd
start
/etc/init
.d
/dhcpd
start
/etc/init
.d
/cobblerd
start
;;
stop)
/etc/init
.d
/httpd
stop
/etc/init
.d
/xinetd
stop
/etc/init
.d
/dhcpd
stop
/etc/init
.d
/cobblerd
stop
;;
restart)
/etc/init
.d
/httpd
restart
/etc/init
.d
/xinetd
restart
/etc/init
.d
/dhcpd
restart
/etc/init
.d
/cobblerd
restart
;;
status)
/etc/init
.d
/httpd
status
/etc/init
.d
/xinetd
status
/etc/init
.d
/dhcpd
status
/etc/init
.d
/cobblerd
status
;;
sync
)
cobbler
sync
;;
*)
echo
"Input error,please in put 'start|stop|restart|status|sync'!"
exit
2
;;
esac
EOF
# chmod +x /etc/init.d/cobbler
# chkconfig cobbler on
# /etc/init.d/cobbler restart
Stopping httpd: [ OK ]
Starting httpd: [ OK ]
Stopping xinetd: [ OK ]
Starting xinetd: [ OK ]
Shutting down dhcpd: [ OK ]
Starting dhcpd: [ OK ]
Stopping cobbler daemon: [ OK ]
Starting cobbler daemon: [ OK ]
# cobbler get-loader #加载部分缺失的网络boot-loaders,否则会报错。
# cobbler sync #同步配置到dhcp pxe和数据目录
# cobbler check #检查是否有错误
|
# 注意:
#这里要提一下,根据错误提示自行度娘,连google都不需要,笔者就不啰嗦了。
所有配置基本完成,接下来我们来介绍一下cobbler命令,以及导入镜像
五:Cobbler命令管理
1、Cobbler命令
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
|
# cobbler
usage
=====
cobbler <distro|profile|system|repo|image|mgmtclass|package|
file
> ...
[add|edit|copy|getks*|list|remove|rename|report] [options|--help]
cobbler <aclsetup|buildiso|
import
|list|replicate|report|reposync|
sync
|validateks|version|signature|get-loaders|hardlink> [options|--help]
Cobbler 命令介绍:
cobbler get-loaders
#加载部分缺失的网络boot-loaders
cobbler check
#检查cobbler配置
cobbler
sync
#同步配置到dhcp pxe和数据目录
cobbler list
#列出所有的cobbler元素
cobbler
import
#导入安装的系统光盘镜像
cobbler report
#列出各元素的详细信息
cobbler distro
#查看导入的发行版系统信息
cobbler profile
#查看配置信息
cobbler system
#查看添加的系统信息
cobbler reposync
#同步yum仓库到本地
cobbler signature update
cobbler --help
#获得cobbler的帮助
cobbler distro --help
#获得cobbler子命令的帮助
获取帮助:
#cobbler import --help
Usage: cobbler [options]
Options:
-h, --help show this help message and
exit
--arch=ARCH OS architecture being imported
--breed=BREED the breed being imported
--os-version=OS_VERSION
the version being imported
--path=PATH
local
path or
rsync
location
--name=NAME name, ex
'RHEL-5'
--available-as=AVAILABLE_AS
tree is here, don't mirror
--kickstart=KICKSTART_FILE
assign this kickstart
file
--
rsync
-flags=RSYNC_FLAGS
pass additional flags to
rsync
|
2、导入镜像(重点)
# Cobbler服务器先挂载CentOS7的系统镜像
1
|
# mount -r -t iso9660 /dev/cdrom /mnt
|
# 导入系统镜像
1
2
3
4
5
6
7
8
9
|
# cobbler import --path=/mnt --name=CentOS-7.4-x86_64 --arch=x86_64
# cobbler import --path=/mnt --name=CentOS-6.8-x86_64 --arch=x86_64
# --path 镜像路径
# --name 为安装源定义一个名字
# --arch 指定安装源是32位、64位、ia64, 目前支持的选项有: x86│x86_64│ia64
# 安装源的唯一标示就是根据name参数来定义,本例导入成功后,安装源的唯一标示就是:CentOS-7.4-x86_64,如果重复,系统会提示导入失败。
# cobbler distro list # 查看镜像列表
CentOS-7.4-x86_64
CentOS-7.4-x86_64
|
# 注意:
# 镜像存放目录,cobbler会将镜像中的所有安装文件拷贝到本地一份,放在/var/www/cobbler/ks_mirror下的CentOS-7.4-x86_64目录下。因此/var/www/cobbler目录必须具有足够容纳安装文件的空间,如果空间不够,可以对/var/www/cobbler目录进行移动,建软链接来修改文件存储位置。
例如:
# ln -s /home/cobbler /var/www
# cd /var/www/cobbler/ks_mirror/ && ls
CentOS-7.4-x86_64 CentOS-6.8-x86_64 config
1
2
3
4
|
# ls CentOS-7.4-x86_64/
CentOS_BuildTag GPL LiveOS RPM-GPG-KEY-CentOS-7
EFI images Packages RPM-GPG-KEY-CentOS-Testing-7
EULA isolinux repodata TRANS.TBL
|
到这里表示镜像已经导入成功了。
# 注意:
# 比较与光盘的文件大小是否一致
1
2
|
# du -sh /var/www/cobbler/ks_mirror/CentOS-7.4-x86_64/
# du -sh /mnt
|
六、 创建kickstarts文件(RHEL/CentOS)
这里要提一下,不同操作系统的kickstart 文件略有不同,笔者现在演示的RHEL/CentOS系列操作系统ks文件
1、 Cobbler的ks.cfg文件存放位置
1
2
3
4
|
# cd /var/lib/cobbler/kickstarts/ && ls#自带很多
default.ks install_profiles sample_autoyast.xml sample_esxi4.ks sample_old.seed
esxi4-ks.cfg legacy.ks sample_end.ks(默认使用的ks文件) sample_esxi5.ks sample.seed
esxi5-ks.cfg pxerescue.ks sample_esx4.ks sample.ks
|
2、编辑CentOS6.8和CentOS7.4 kickstart配置文件
这里贴出来我最小化安装两个版本ks文件,笔者喜欢最小化安装,你也可以根据自己需要,定制ks文件。
提供两种配置ks的方法:
方法1、 每安装好一台Centos机器,Centos安装程序都会创建一个kickstart配置文件,记录你的真实安装配置。如果你希望实现和某系统类似的安装,可以基于该系统的kickstart配置文件来生成你自己的kickstart配置文件。(生成的文件名字叫anaconda-ks.cfg位于/root/anaconda-ks.cfg)
方法2、Centos提供了一个图形化的kickstart配置工具。在任何一个安装好的Linux系统上运行该工具,就可以很容易地创建你自己的kickstart配置文件。kickstart配置工具命令为redhat-config-kickstart(RHEL3)或system-config-kickstart(RHEL5/6/7)
# yum install system-config-kickstart #安装
# yum groupinstall "X Window System" #安装X Window图形界面
# system-config-kickstart #运行kickstart配置
#笔者不喜欢使用Linux运行图形化界面,浪费资源,有兴趣的伙伴可以研究一下
接下来给两个实例(重点)
实例一(CentOS7.4 ks)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
|
#platform=x86, AMD64, or Intel EM64T
#version=DEVEL
# Install OS instead of upgrade
install
# Keyboard layouts
# old format: keyboard us
# new format:
keyboard --vckeymap=us --xlayouts=
'us'
# Root password
rootpw --iscrypted $1$ljohn$yBMDpKkntQ9jfV1ZAWKpU1
# Use network installation
url --url=
"http://192.168.137.38/cobbler/ks_mirror/CentOS-7.4-x86_64/"
# System language
lang en_US.UTF-8
# Firewall configuration
firewall --disabled
# System authorization information
auth --useshadow --passalgo=sha512
# Use graphical install
graphical
# Run the Setup Agent on first boot
firstboot --
enable
# SELinux configuration
selinux --disabled
# Do not configure the X Window System
skipx
# System services
services --disabled=
"chronyd"
ignoredisk --only-use=sda
# Network information
network --bootproto=dhcp --device=eth0 --onboot=on
#network --bootproto=static --device=eth0 --gateway=192.168.137.1 --ip=192.168.137.40 --nameserver=8.8.8.8 --netmask=255.255.255.0 --activate
# Reboot after installation
reboot
# System timezone
timezone Asia
/Shanghai
# System bootloader configuration
bootloader --location=mbr --boot-drive=sda
# Clear the Master Boot Record
zerombr
# Partition clearing information
clearpart --all --initlabel
# Disk partitioning information
part
/boot
--asprimary --fstype=
"xfs"
--size=1024
part swap --fstype=
"swap"
--size=2048
part / --fstype=
"xfs"
--grow --size=1
%packages
@^minimal
@core
%end
|
实例二(CentOS6.8 ks):
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
|
#platform=x86, AMD64, or Intel EM64T
#version=DEVEL
# Firewall configuration
firewall --disabled
# Install OS instead of upgrade
install
# Use network installation
url --url=
"http://192.168.137.38/cobbler/ks_mirror/CentOS-6.8-x86_64/"
#repo --name="CentOS" --baseurl=cdrom:sr0 --cost=100
# Root password
rootpw --iscrypted $1$ljohn$yBMDpKkntQ9jfV1ZAWKpU1
# System authorization information
auth --useshadow --passalgo=sha512
# Use graphical install
graphical
# System keyboard
keyboard us
# System language
lang en_US.UTF-8
# SELinux configuration
selinux --disabled
# Do not configure the X Window System
skipx
# Installation logging level
#logging --level=info
# Reboot after installation
reboot
# System timezone
timezone Asia
/Shanghai
# Network information
network --bootproto=dhcp --device=eth0 --onboot=on
#network --bootproto=dhcp --device=eth1 --onboot=on
# System bootloader configuration
bootloader --append=
"crashkernel=auto rhgb quiet"
--location=mbr --driveorder=
"sda"
# Clear the Master Boot Record
zerombr
# Partition clearing information
clearpart --all --initlabel
# Disk partitioning information
part
/boot
--asprimary --fstype=
"ext4"
--size=500
part swap --fstype=
"swap"
--size=2048
part / --fstype=
"ext4"
--grow --size=1
%packages --nobase
@core
%end
|
注意:
这两个实例安装包都使用了core的最小化版本安装,可以大大缩短系统部署时间,毕竟时间就是金钱。如果有需要的,可以在packages后面添加一些常用的工具,这里不再赘述。
3、关联镜像与kickstart 文件
1
2
3
4
5
6
|
# cobbler profile report --name CentOS-7.4-x86_64#查看镜像是否存在,
# cobbler profile report --name CentOS-6.8-x86_64
# cobbler profile edit --name=CentOS-7.4-x86_64 --kopts='net.ifnames=0 biosdevname=0'#这里还原centos7网卡名为“eth0”
# cobbler profile edit --name=CentOS-7.4-x86_64 --distro=CentOS-7.4-x86_64 --kickstart=/var/lib/cobbler/kickstarts/CentOS-7.4-x86_64.cfg #关联ks文件与对应的CentOS7.4镜像
# cobbler profile edit --name=CentOS-6.8-x86_64 --distro=CentOS-6.8-x86_64 --kickstart=/var/lib/cobbler/kickstarts/CentOS-6.8-x86_64.cfg
# service cobbler sync #与cobbler sync作用相同,同步配置,每次对cobbler更改都要执行同步
|
七、无人值守安装系统
安装启动前保证要安装的机器,所在的物理网络与现在Cobbler畅通,如果是虚拟机(VMware),要关闭其自身的DHCP服务
编辑--> 虚拟网络编辑器 --> 使用本地DHCP服务将IP地址分配给虚拟机(取消勾选),避免和Cobbler服务器的DHCP冲突。
虚拟机需要先创建一个虚拟机(按需配置,切记如果是CentOS7.x以上一定要给2G的内存,这都是坑...希望你没踩到)
1、检查cobbler各个组件
1
2
3
4
|
# cobbler sync
# cobbler check
# cobbler distro list
# cobbler profile report --name CentOS-7.4-x86_64#查看你需要安装的镜像相关配置是否正确
|
2、启动机器:
选择镜像安装即可
3、安装完成如图:
Cobbler-web 图形化配置
这里配置不做说明,
Linux系统重装测试
1,先确定当前linux系统中已经安装了koan软件。对于koan的安装可以放到ks文件中在安装系统的过程中完成安装操作。执行如下命令检查
1
2
3
|
# rpm -qa|grep koan
koan-2.0.11-2.el6.noarch
# yum install koan#安装koan
|
2,有了koan软件后可以执行如下操作,查看cobbler上的系统版本列表
1
2
3
4
|
#koan --server=192.168.137.38 --list=profiles
- looking
for
Cobbler at http:
//192
.168.137.38:80
/cobbler_api
CentOS-6.8-x86_64
CentOS-7.4-x86_64
|
这里我们选择CentOS-7.4-x86_64来重装。可以执行如下命令
1
2
|
# koan --server=192.168.137.38 --profile=CentOS-7.4-x86_64 --replace-self
# reboot #直接重启即可自动重装
|
附录1:
Cobbler目录说明
1、Cobbler配置文件目录:/etc/cobbler
1
2
3
4
5
6
7
8
9
10
11
|
/etc/cobbler/settings
#cobbler主配置文件
/etc/cobbler/dhcp
.template
#DHCP服务的配置模板
/etc/cobbler/tftpd
.template
#tftp服务的配置模板
/etc/cobbler/rsync
.template
#rsync服务的配置模板
/etc/cobbler/iso
#iso模板配置文件
/etc/cobbler/pxe
#pxe模板文件
/etc/cobbler/power
#电源的配置文件
/etc/cobbler/users
.conf
#Web服务授权配置文件
/etc/cobbler/users
.digest
#用于web访问的用户名密码配置文件
/etc/cobbler/dnsmasq
.template
#DNS服务的配置模板
/etc/cobbler/modules
.conf
#Cobbler模块配置文件
|
2、Cobbler数据目录:/var/lib/cobbler
1
2
3
4
|
/var/lib/cobbler/config
#配置文件
/var/lib/cobbler/triggers
#Cobbler命令
/var/lib/cobbler/kickstarts
#默认存放kickstart文件
/var/lib/cobbler/loaders
#存放的各种引导程序
|
3、系统安装镜像目录:/var/www/cobbler
1
2
3
|
/var/www/cobbler/ks_mirror
#导入的系统镜像列表
/var/www/cobbler/images
#导入的系统镜像启动文件
/var/www/cobbler/repo_mirror
#yum源存储目录
|
4、日志目录:/var/log/cobbler
1
2
|
/var/log/cobbler/install
.log
#客户端系统安装日志
/var/log/cobbler/cobbler
.log
#cobbler日志
|