多次报错秃头KVM部署+理论

前言

美国环境保护EPA报告中曾经统计过一组统计数据: EPA研究服务器和数据中心得能源效率时发现，实际上服务器只有5%得时间时在工作的,其他时间一直处于休眠状态
软件资源是没有硬件资源性能高(稳定和效率)的(相同功能)

一、虚拟化技术

通过虚拟化技术将一 台计算机虚拟为多台逻辑计算机，在一 台计算机上同时运行多个逻辑计算机，同时每个逻辑计算机可运行不同的操作系统，应用程序都可以在相互独立的空间内运行而互相不影响，从而提高计算机的工作效率

1、在一个操作系统中(win10) 模拟多个操作系统(centos、 win10、 suse) ，同时每个操作系统可以跑不同的服务(nginx+ tomcat)，从而实现一台宿主机搭建一 个集群 (从整体)
2、通过软件/应用程序的方式，来实现物理硬件的功能ensp以软件形式实现物理设备的功能(二层交换机、路由器、三层交换机等)

二、虚拟化技术发展

1961年，IBM709机器实现了分时系统，将CPU占用切分为多个极短的时间片(1/100sec)每-个时间片执行不同的工作，通过对这些时间片进行轮询从而将一个CPU伪装成多个CPU
1972年， IBM正式将system370机的分时系统命名为虚拟机
1990年，IBM推出的system390机支持逻辑分区 (将一个CPU分为多份， 相互独立，也就是逻辑分割)
Xen 2003年问世，是一 个外部的hypervisor/VMM程序(虚拟机管理程序)，能够控制宿主机和给多个客户机分配资源
KVM：2007年问世， 现已内置在kernel内核中的
Xen支持的虚拟化技术:全虚拟化，半虚拟化
KVM：支持的虚拟化技术:全虚拟化

三、虚拟化类型

1、全虚拟化：将物理硬件资源全部通过软件的方式抽象化，最后进行调用
★★使用的方法：使用hypervisor (VMM)软件，其原理是在底层硬件和服务器之间建立一个抽象层,
而基于核心的虚拟机是面向Linux系统的开源产品hypervisor(VMM)可以捕捉CPU的指令,
为指令访问硬件控制器和外设充当中介。
2、半虚拟化：需要修改操作系统
3、直通：直接使用物理硬件资源(需要支持，还不完善)

3.1 特性

3.1.1 优势

①集中化管理(远程管理、维护)
②提高硬件利用率(物理资源利用率低-例如峰值，虚拟化解决了“空闲” 容量)
③动态调整机器/资源配置(虚拟化把系统的应用程序和服务硬件分离、提高了灵活性)
④高可靠(可部署额外的功能和方案，可提高透明负载均衡、迁移、恢复复制等应用环境)

3.1.2 劣势

①前期高额费用(初期的硬件支持)
②降低硬件利用率(特定场景-例如极度吃资源的应用不一定适合虚拟化)
③更大的错误影响面(本地物理机down机会导致虚拟机均不可用，同时可能虚拟机中文件全部损坏)
④实施配置复杂、管理复杂(管理人员运维、排障困难)
⑤一定的限制性(虚拟化技术涉及各种限制，必须与支持/兼容虚拟化的服务器、应用程序及供应商结合使用)
⑥安全性(虚拟化技术自身的安全隐患)

3.1.3 案例

VMwareWorkstation：使用软件达到虚拟多操作系统
VirtualBox：使用软件虚拟出多物理设备功能
以VMwareworkstation为例
workstation支持intel公司和AMD公司的虚拟化技术[1]
硬件辅助虚拟化技术Intel-VT-x AMD-V
Intel VT-x技术主要包含CPU、内存和I / 0三方面的虚拟化技术，同时提供优化处理(早期为弥补X86架构虚拟化的缺陷)
AMD V是对x86处理器系统架构的一组硬件扩展和硬件辅助虚拟化技术，可以简化纯软件的虚拟化解决方案
改进VMM (虚拟机监视器)的设计，更充分地利用硬件资源，提高服务器和数据中心的虚拟化效率
VMM(虚拟机监视器/管理程序) haperivisor
VMM是一个系统软件， 可以维护多个高效、隔离的程序环境(虚拟机)，同时可以管理计算机系统的真实资源、为虚拟机提供接口

3.1.4 VMM功能

1、对物理资源进行逻辑分割(转化为虚拟资源)
2、调用虚拟资源供与应用程序(虚拟机)

四、KVM简介

4.1 广义KVM

KVM (Kernel-based Vritual Machine)–基于内核的虚拟机
KVM是基于虚拟化护展的X86硬件的开源Linux原生的全虚拟化方案(要求cpu支持Intel-VT- x或AMD-V)
KVM内嵌于内核模块中，模拟处理器和内存以支持虚拟机运行
虚拟机被实现为常规的Linux进程，由标准Linux 调度程序进行调度;
虚拟机的每个虚拟CPU被实现为-个常规的Linux进程。这使得KMV能够使用Linux内核的已有功能
但KVM本身不执行任何模拟。需要客户空间程序(虚拟机)通过/dev/kvm (此虚拟设备需要开起硬件辅助虚拟化才能看到)接口设置一个客户机虚拟服务 器的地址空间,并且由Qemu模拟I/O (ioctl) 进行调度资源和维护管理
Libvirt：KVM的管理工具，除了可以管理KVM这类VMM,还可以管理Xen, VirtualBox, 甚至OpenStack底层
Libvirt包含3个组件：后台daemon程序libvirtd、API库、命令行工具virsh

4.2 KVM架构及原理

4.2.1 KVM虚拟化架构/三种模式

1、客户模式(guestOS)：VM中的OS为GuestOS
客户机在操作系统中运行的模式，客户机分为内核模式和用户模式，作用如下：
1）用户模式
为用户提供虚拟机管理的用户空间工具以及代表用户执行/O, Qemu工作在此模式下(Qemu的主要功能)
2）linux内核模式
模拟CPU、内存，实现客户模式切换，处理从客户模式的推出，KVM即运行在此模式下

4.3 KVM工作流程

用户模式的Qemu利用接口libkvm通过ioctl 系统调用进入内核模式。KVM驱动为虚拟机创建虚拟 CPU和虚拟内存,然后执行VMLAU.NCH指令进入客户模式，装载Guest OS并运行。Guest OS运行过程中如果发生异常,则暂停Guest OS的运行并保存当前状态同时退出到内核模式来处理这些异常。
内核模式处理这些异常时如果不需要I/O则处理完成后重新进入客户模式。如果需要l/0则进入到用户模式，则由Qemu来处理1/O,处理完成后进入内核模式，再进入客户模式

五、思路

1、KVM技术介绍
是什么技术：虚拟化
2、KVM技术定位(实际应用)
workstation、virtualbox
模拟硬件资源/设备/操作系统
3、KVM虚拟化技术核心功能(原理方面)
QEMU (工作在用户层，控制libkvm工具(工具作用，控制内核中的KVM)来调用物理虚拟化资源
(调用物理虚拟化资源的方式是ioctl,供给虚拟机)
KVM (工作在内核层，虚拟化/抽象化物理硬件资源，供给Qemu组件调用)
4、KVM各核心组件功能
QEMU
功能：控制/O虚拟化，调用硬件资源
KVM
功能：为虚拟机提供CPU、内存(硬件资源)的虚拟化

六、虚拟化区别

6.1 虚拟化前

①每台主机拥有-个操作系统
②软硬件紧密结合
③在同一个主机上运行多个应用程序通常会产生冲突
④系统资源利用率低(例如: 5%)
⑤硬件成本高昂并且不够灵活

6.2 虚拟化后

①打破了操作系统和硬件的互相依赖
②通过封装到虚拟机的技术，管理操作系统和应用程序为单-的个体
③强大的安全和故障隔离
④虚拟机时独立于硬件的，它们可以在任何硬件上运行

6.3 对比

操作系统方面(虚拟化前)：
LAMP架构中(以一 台主机实现)
LINUX + Apache + MySQL + PHP
其中Apache与MySQL资源是共享的

如果架构要求服务间的安全性隔离比较高的话，Apache的页面和MySQL数据库的目录一定是不能互相碰面， 如果Apache漏洞暴露出来，攻击者就可以通过Apache的进程访问到MySQL的数据目录，从而获取MySQL中的数据，这种就是严重的安全隐患。而想解决这种潜在危险，可以通过实现内核级别的隔离(使用虚拟化技术)

软硬件结合
因为硬件和操作系统不兼容或者不支持，导致有些软、硬件功能无法正常使用(也是最难的问题)
使用虚拟化,软硬件之间是会通过虚拟化层驱动进行隔离(调配)的，只要虚拟化层可以识别软/硬件应用，就可以将软硬件结合使用

③在同一个主机上运行多个应用程序通常会产生冲突
Apache和Nginx定位相同(80端口)只能使用反向代理的方式进行分离，而同时如果在同一台机器使用这种方式，Apache和Nginx中重要的数据文件如果同时被泄露出…而虚拟化可以隔离服务

七、KVM虚拟化平台部署

7.1 虚拟机资源

CPU：双核双线程-CPU虚拟化开启
内存：8G	
硬盘：300G
双网卡：单网卡
操作系统：Centos 7.6（1810）

7.2 实验环境

1、修改主机名

hostnamectl set-hostname kvm 
su

2、将镜像光盘设为自动/永久挂载

vim /etc/fstab
/dev/cdrom /mnt iso9660 defaults 0 0
mount -a 
df -hT
...
/dev/sr0       iso9660   4.3G  4.3G     0  100% /mnt

3、环境优化
① 设置DNS反向解析
#是否反解DNS，设置为NO可以让客户端连接服务器更快

[root@kvm ~]# vim /etc/ssh/sshd_config 
#取消DNS注释，改为NO
UseDNS no

4、制作本地YUM仓库

cd /etc/yum.repos.d/
ls
CentOS-Base.repo  CentOS-Debuginfo.repo  CentOS-Media.repo    CentOS-Vault.repo
CentOS-CR.repo    CentOS-fasttrack.repo  CentOS-Sources.repo
mkdir bak
mv CentOS-* bak
ls
bak
vim local.repo
[local]
name=kvm
baseurl=file:///mnt
gpgcheck=0
enabled=1
yum clean all 
yum repolist

5、关闭防火墙、核心防护

systemctl stop firewalld
systemctl disable firewalld
Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
setenforce 0

7.3 安装KVM

① 安装KVM基本组件

# 安装 GNOME 桌面环境  如果装了图形界面可以不需要装
yum groupinstall -y "GNOME Desktop"
# KVM 模块
yum -y install qemu-kvm
# 安装KVM 调试工具,可不安装
yum -y install qemu-kvm-tools
# 构建虚拟机的命令行工具
yum -y install virt-install
# qemu 组件,创建磁盘、启动虚拟机等
yum -y install qemu-img
# 网络支持工具
yum -y install bridge-utils
# 虚拟机管理工具
yum -y install libvirt
# 图形界面管理虚拟机	
yum -y install virt-manager

#以下是安装的内容
yum groupinstall -y "GNOME Desktop"
yum -y install qemu-kvm
yum -y install qemu-kvm-tools
yum -y install virt-install
yum -y install qemu-img
yum -y install bridge-utils
yum -y install libvirt
yum -y install virt-manager

# 检测CPU是否支持虚拟化
[root@localhost ~]# cat /proc/cpuinfo | grep vmx          
# 查看CPU是否支持虚拟化
flags		: fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush mmx fxsr sse sse2 ss ht syscall nx pdpe1gb rdtscp lm constant_tsc arch_perfmon nopl xtopology tsc_reliable nonstop_tsc eagerfpu pni pclmulqdq vmx ssse3 fma cx16 pcid sse4_1 sse4_2 x2apic movbe popcnt tsc_deadline_timer aes xsave avx f16c rdrand hypervisor lahf_lm abm 3dnowprefetch ssbd ibrs ibpb stibp tpr_shadow vnmi ept vpid fsgsbase tsc_adjust bmi1 avx2 smep bmi2 invpcid mpx rdseed adx smap clflushopt xsaveopt xsavec arat spec_ctrl intel_stibp flush_l1d arch_capabilities

# 查看KVM模块是否已安装
Lsmod：显示已载入的系统模块
[root@kvm ~]# lsmod | grep kvm
kvm_intel             183621  0 
kvm                   586948  1 kvm_intel
irqbypass              13503  1 kvm

② 设置开启启动界面的显示模式
[root@kvm ~]# ln -sf /lib/systemd/system/graphical.target /etc/systemd/system/default.target

7.4 设置KVM网络

7.4.1 KVM网络的两种模式

① NAT：默认设置，数据包由 NAT 方式通过主机的接口进行传送，可以访问外网，但是无法从外部访问虚拟机网络
② 网桥：这种模式允许虚拟机像一台独立的主机一样拥有网络，外部的机器可以直接访问到虚拟机内部，但需要网卡支持(一般有线网卡都支持)

使用Bridge网桥模式进行部署

vim /etc/sysconfig/network-scripts/ifcfg-ens33
TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=none      #修改
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=aac61931-47a6-40e5-9511-68adf20e97c5
DEVICE=ens33
ONBOOT=yes
#IPADDR=192.168.100.46
#PREFIX=24
#GATEWAY=192.168.100.1
BRIDGE=br0			#删除原先地址，设置为网桥模式，关联br0网卡

#创建、编辑桥接网卡
vim /etc/sysconfig/network-scripts/ifcfg-br0

TYPE=Bridge
BOOTPROTO=static
DEFROUTE=yes
PEERDNS=yes
PEERROUTES=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_PEERDNS=yes
IPV6_PEERROUTES=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=br0
DEVICE=br0
ONBOOT=yes
IPADDR=192.168.238.10
NETMASK=255.255.255.0
GATEWAY=192.168.238.2

7.5 KVM部署与管理

#创建KVM存储和镜像数据的目录、上传centos7镜像

mkdir -p /data_kvm/iso
mkdir -p /data/_kvm/store
mount.cifs //192.168.238.1/jing /abc
Password for root@//192.168.238.1/jing: ******
cd /abc
ls
CentOS-6.5-x86_64-bin-DVD1.iso
CentOS-7-x86_64-DVD-1708.iso
CentOS-7-x86_64-DVD-1810-7.6.iso
cn_windows_10_business_editions_version_1803_updated_march_2018_x64_dvd_12063730.iso
cn_windows_10_enterprise_version_1703_updated_march_2017_x64_dvd_10194191.iso
cn_windows_7_ultimate_with_sp1_x64_dvd.iso
 
cp -p CentOS-7-x86_64-DVD-1810.iso /data_kvm/iso/
#查看镜像
ll /data_kvm/iso/
总用量 4481024
-rwxr-xr-x. 1 root root 4588568576 2月  20 2019 CentOS-7-x86_64-DVD-1810.iso

7.6 使用虚拟系统管理器管理虚拟机

创建思路：
① 创建存储池（ISO、STORE)
② 添加存储卷
③ 创建虚拟机

[root@kvm kvmdata]# virt-manager