一、虚拟化技术
1.概述
虚拟化是一个广义的术语
在计算机的方面,即虚拟化技术能够将一台计算机从内部虚拟化成多台逻辑意义上的计算机,即在一台计算机上能够同时运行多台逻辑计算机,且每台逻辑计算机都可以运行不同的操作系统程序,应用程序可以在相互独立的空间内运行而互相不受影响,从而提高计算机整体的工作效率
在一个操作系统(Windows)之中模拟(虚拟化)出多个操作系统(Windows、CentOS),每个操作系统可以同时跑不同的服务,例如 Nginx+Tomcat。实现一台宿主机就能搭建一个完整的集群
还能够通过软件或者应用程序的方式,来实现(虚拟化)物理硬件的功能,例如华为大名鼎鼎的 eNSP,让多少网络工程师秃了头。这个软件的强大之处在于,可以虚拟出物理设备的完整功能,例如链路聚合、三层交换、VRRP 等,极大的方便了我们
2.发展历程
1963年 : IBM709机器实现了分时系统,将 CPU 占用切分为多个极短的时间片(1/100sec)每一个时间片执行不同的工作,通过对这些时间片进行轮询,从而将一个 CPU 伪装成多个 CPU
1972年 : IBM 正式将 system370 机的分时系统命名为虚拟机
1990年 : IBM 推出的 system390 机支持逻辑分区 (将一个 CPU 分为多份,相互独立,也就是逻辑分割)
2003年: Xen 问世,其是一个外部的 hypervisor/VMM 程序 (虚拟机管理程序),能够控制宿主机及给多个客户机分配资源
2007年 : KVM 问世,现已内置与 Kernel 内核中
Xen 支持的虚拟化技术:全虚拟化、半虚拟化
KVM 支持的虚拟化技术:全虚拟化
3.类型
全虚拟化
全虚拟化(Full Virtualization)也称为原始虚拟化技术
将物理硬件资源全部通过软件的方式来抽象化(虚拟化),最后进行统一分配调用
使用虚拟机协调 Guest 操作系统和原始硬件,VMM 在 Guest 操作系统和裸硬件之间用于工作协调,一些受保护指令必须由 Hypervisor(虚拟机管理程序)来捕获处理
即,使用 hypervisor (VMM) 软件,在底层硬件和服务器之间建立一个抽象层
全虚拟化的运行速度要快于硬件模拟,但是性能方面不如裸机,因为 Hypervisor 需要占用一些资源
半虚拟化
半虚拟化(Para Virtualization)是另一种类似于全虚拟化的技术,它使用 Hypervisor分享存取底层的硬件,但是它的 Guest 操作系统集成了虚拟化方面的代码
该方法无需重新编译或引起陷阱,因为操作系统自身能够与虚拟进程进行很好的协作
半虚拟化需要 Guest 操作系统做一些修改,使 Guest 操作系统意识到自己是处于虚拟化环境的,但是半虚拟化提供了与原操作系统相近的性能
直通
能够直接调用硬件资源
就目前来看,因为有太多制约条件限制,发展还不完善
4.特点
`优势`
1.能够集中化管理(远程管理及维护)
2.提高了硬件利用率 (物理资源利用率低-例如应对峰值,虚拟化很好的解决了“空闲"容量)
3.能够动态调整机器/资源配置(虚拟化把系统的应用程序和服务硬件分离、提高了灵活性)
4.高可靠(可部署额外的功能和方案,可提高透明负载均衡、迁移、恢复复制等应用环境)
`劣势`
1.前期高额费用(初期的硬件支持)
2.降低硬件利用率 (特定场景例如极度吃资源的应用不一定适合虚拟化,虚拟化毕竟多少还是会降低性能)
3.更大的错误影响面 (本地物理机 宕机 会导致虚拟机均不可用,同时可能虚拟机中文件全部损坏,单点故障)
4.实施配置复杂、管理复杂(管理人员运维、排障困难,运维专属)
5.一定的限制性 (虚拟化技术涉及各种限制,必须与支持/兼容虚拟化的服务器、应用程序及供应商结合使用,涉及开发底层/公司源代码了)
6.安全性 (虚拟化技术自身的安全隐患)
5.相关
简单介绍两个与虚拟化技术息息相关的软件:
VMware Workstation:使用软件达到虚拟多操作系统
VirtualBox:使用软件虚拟出多物理设备功能(eNSP)
以 VMwareWorkstation 为例:
1.workstation支持intel公司和 AMD公司的虚拟化技术
2.硬件辅助虚拟化技术:Intel-VT-x、AMD-V
1)intel VT-x技术主要包含CPU、内存和 I/O 三方面的虚拟化技术,同时提供优化处理 (早期为弥补X86架构虚拟化的缺陷)
2)AMD-V是对x86处理器系统架构的一组硬件扩展和硬件辅助虚拟化技术
VMM (虛拟机监视器/管理程序) haperivisor,是一个系统软件,可以维护多个高效、隔离的程序环境(虚拟机),同时可以管理计算机系统的真实资源、为虚拟机提供接口
改进VMM (虛拟机监视器)的设计,更充分地利用硬件资源,提高服务器和数据中心的虚拟化效率
VMM功能:
1.对物理资源进行逻辑分割(转化为虚拟资源)
2.调用虚拟资源供与应用程序(虚拟机)
二、KVM
KVM(Kernel-based Vritual Machine),即基于内核的虚拟机
1.概述
KVM 是基于虚拟化扩展的 X86 硬件的开源 Linux 原生的全虚拟化方案 (要求 cpu支持Intel-VT x 或 AMD-V)
KVM 内嵌于内核模块中,模拟处理器和内存以支持虚拟机运行
虚拟机被实现为常规的 Linux进程,由标准 Linux 调度程序进行调度
虚拟机的每个虚拟 CPU 被实现为一个常规的 Linux 进程,这使得 KMV 能够使用 Linux 内核的已有功能
KVM 本身不执行任何模拟,需要客户空间程序(虚拟机)通过 /dev/kvm (此虚拟设备需要开起硬件辅助虚拟化才能看到) 接口设置一个客户机虚拟服务器的地址空间,且由Qemu 模拟 I/O(ioctl)进行调度资源和维护管理
Libvirt:KVM的管理工具,除了可以管理KVM这类VMM,还可以管理Xen、VirtualBox,甚至OpenStack底层
Libvirt包含3个组件:
1.后台daemon程序libvirtd
2.API 库
3.命令行工具virsh
QEMU是一个通用的开源机器模拟器和虚拟器
2.原理
Guest:客户机系统,包括 CPU、内存、驱动(Console、网卡、I/O 设备驱动等),被 KVM 置于—种受限制的 CPU 模式下运行
KVM 内核模块模拟处理器和内存以支持虚拟机运行
Qemu 主要处理 l/O 以及为客户提供一个用户空间 /dev/kvm 工具 libvirt(KVM 的管理工具)来进行虚拟机管理 ioctl(定义)专用于设备输入输出操作的系统调用
以上构成一个完整的虚拟化平台
`简单的说:`
1.KVM驱动提供处理器、内存的虚拟化,以及客户机I/O的拦截
2.guest的I/O被拦截后,交由Qemu处理
3.Qemu利用接口libkvm调用(ioctl)虚拟机设备接口/dev/kvm来分配资源、管理、维护虚拟机
QEMU :负责抽象化I/O资源
KVM:内置在内核中,负责对实际物理资源进行抽象/逻辑分割
QEMU :借助libvirt对内核中(KVM逻辑分割的资源进行调用)然后,将资源传输至VMM(虚拟机管理器)
3.虚拟化架构
`客户模式(GuestOS):`VM 中的 OS 为 Guestos,客户模式为客户机在操作系统中运行的模式,客户机又分为内核模式和用户模式
`用户模式:`为用户提供虚拟机管理的用户空间工具以及代表用户执行 I/O,Qemu 工作在此模式下(Qemu 的主要功能)
`Linux 内核模式:`模拟 CPU、内存,实现客户模式切换,处理从客户模式的退出,KVM 即运行在此模式下
4.工作流程
1.用户模式的 Qemu 利用接口 libkvm 通过 ioctl 系统调用进入内核模式
2.KVM 驱动为虚拟机创建虚拟 CPU 和虚拟内存,然后执行 VMLAU-NCH 指令进入客户模式,装载 Guest OS 并运行
3.Guest OS 运行过程中如果发生异常,则暂停 Guest OS 的运行并保存当前状态同时退出到内核模式来处理这些异常
4.内核模式处理这些异常时如果不需要 I/O 则处理完成后重新进入客户模式
5.如果需要 I/O 则进入到用户模式,则由 Qemu 来处理 I/O,处理完成后进入内核模式,再进入客户模式
5.虚拟化前后对比
前
每台主机拥有一个操作系统
软硬件紧密结合
在同一个主机上运行多个应用程序通常会产生冲突
系统资源利用率低(例如: 5%)
硬件成本高昂并且不够灵活
后
打破了操作系统和硬件的互相依赖
通过封装到虚拟机的技术,管理操作系统和应用程序为单一的个体
强大的安全和故障隔离
虚拟机时独立于硬件的,它们可以存任何硬件上运行
三、部署 KVM 虚拟化平台
1.准备虚拟机
CPU:双核四线程,开启 CPU 虚拟化
内存:8G
硬盘:300G
网卡:单网卡
操作系统:Centos 7
注:关机后再修改虚拟机设置
2.实验环境
1.修改主机名
hostnamectl set-hostname kvm
su
2.将镜像光盘设为自动挂载
vim /etc/fstab
/dev/cdrom /mnt iso9660 defaults 0 0
mount -a
df -hT
3.环境优化
vim /etc/ssh/sshd_config
UseDNS no
#115行,去除注释 意思为:使用了dns反查,这样的话当ssh为某个IP时,系统会试图通过DNS反查相对应的域名,
#如果DNS中没有这个IP的域名解析,则会等到DNS查询超时才会进行下一步,消耗很长时间,所有不使用
4.制作本地YUM仓库
cd /etc/yum.repos.d/
mv local.repo repos.bak/ #以前做过本地YUM源仓库
vim local.repo
[kvm] #仓库类别
name=kvm #仓库名称
baseurl=file:///mnt #指定URL访问路径为光盘挂载目录。前两个'//'为固定格式,第三个'/'为目录下
gpgcheck=0 #开启此YUM源,默认项可省略
enabled=1 #不验证软件包的前面
yum clean all && yum makecache
#删除YUM缓存及更新
5.关闭防火墙及安全机制
systemctl stop firewalld.service
systemctl disable firewalld.service
setenforce 0
3.安装 KVM
安装KVM基本组件:
yum groupinstall -y "GNOME Desktop"
#安装GNOME桌面环境 如果Centos装了图形界面也可以不需要装,忽略此步骤
yum -y install qemu-kvm
#KVM模块
yum -y install qemu-kvm-tools
#安装KVM调试工具,可不安装
yum -y install virt-install
#构建虚拟机的命令行工具
yum -y install qemu-img
#qemu组件,用于创建磁盘、启动虚拟机等
yum -y install bridge-utils
#网络支持工具
yum -y install libvirt
#虚拟机管理工具
yum -y install virt-manager
#图形界面管理虚拟机
yum groupinstall -y "GNOME Desktop"
yum -y install qemu-kvm
yum -y install qemu-kvm-tools
yum -y install virt-install
yum -y install qemu-img
yum -y install bridge-utils
yum -y install libvirt
yum -y install virt-manager
cat /proc/cpuinfo | grep vmx
#检测CPU是否支持虚拟化
lsmod | grep kvm
#查看KVM模块是否已安装
ln -sf /lib/systemd/system/graphical.target /etc/systemd/system/default.target
#设置开启启动界面的显示模式
4.设置 KVM 网络
`KVM网络的两种模式:`
`1.NAT:`默认认设置,数据包由NAT方式通过主机的接口进行传送,可以访问外网,但是无法从外部访问虚拟机网络
`2.网桥:`这种模式允许虚拟机像一台独立的主机一样拥有网络,外部的机器可以直接访问到虚拟机内部,但需要网卡支持(一般有线网卡都支持)
使用Bridge网桥模式进行部署:
vim /etc/sysconfig/network-scripts/ifcfg-ens33
TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=none #设置为none,不指定
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=14947131-5ba1-4e71-a197-841075875307
DEVICE=ens33
ONBOOT=yse
#IPADDR=192.168.78.11 #通通注释掉
#NETMASK=255.255.255.0
#GATEWAY=192.168.78.2
#DNS1=192.168.78.2
BRIDGE=br0 #设置为网桥模式,关联br0网卡
vim /etc/sysconfig/network-scripts/ifcfg-br0
TYPE=Bridge
BOOTPROTO=static #改为none,不指定
DEFROUTE=yes
PEERDNS=yes
PEERROUTES=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_PEERDNS=yes
IPV6_PEERROUTES=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=br0
DEVICE=br0
ONBOOT=yes
IPADDR=192.168.78.11
NETMASK=255.255.255.0
GATEWAY=192.168.78.2
service network restart
#重启网卡
5.KVM 部署与管理
mkdir -p /data_kvm/iso
mkdir -p /data_kvm/store
#创建KVM存储和镜像数据的目录
smbclient -L //192.168.1.34/
#扫描宿主机的共享目录
mount.cifs //192.168.1.34/软件包 /mnt/
#挂载共享目录至/mnt目录下
cp -p CentOS-7-x86_64-DVD-1708.iso /data_kvm/iso/
#复制至KVM存储镜像数据的目录
#使用虚拟管理器管理虚拟机
创建思路:
1.创建存储池(ISO、STORE)
2.添加存储卷
3.创建虚拟机
#回到VMware,输入以下命令,打开虚拟系统管理器
virt-manager
第一步:创建存储池
第二步:创建存储卷
第三部:创建虚拟机