KVM+GFS构建KVM高可用群集案例

最新推荐文章于 2024-04-09 11:02:09 发布
最新推荐文章于 2024-04-09 11:02:09 发布
阅读量4.2k 收藏 24
点赞数 6
分类专栏： 群集架构
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42953006/article/details/104386376
版权

文章目录

所需安装包（GFS软件和XFTP软件包）
链接：https://pan.baidu.com/s/1Zf9Y-mpu2W0jvsO6qU1FQQ

提取码：ez51

一、案例概述

  • 本案例主要通过KVM及Glusterfs技术，结合起来达到kvm高可用。
  • 利用Glusterfs的分布式复制卷，对kvm虚拟机文件进行分布式存储和冗余功能

二、实验环境

在vmware虚拟机中开3台虚拟机，一台搭建KVM虚拟化平台，二台做GFS分布式复制卷
在这里插入图片描述

三、实验目的

  • 当其中一个节点数据丢失或者损坏之后， kvm 仍然能够通过卷组找到另一节点上的虚拟机文件， 保证虚拟机正常运行。

  • 当节点修复之后， Glusterfs 会自动同步同一组里面有数据的节点数据

四、实验配置

4.1、部署GFS分布式复制卷平台
  • 创建主机名和IP地址映射关系
[root@node1 ~]# vim /etc/hosts
192.168.100.41  node1
192.168.100.42  node2
  • 为2个节点分别添加一块磁盘用于存储数据，下面只演示node1，node2同理。

在这里插入图片描述

  • 将磁盘挂载到/data目录下
[root@node1 ~]# fdisk /dev/sdb   ###创建磁盘分区
欢迎使用 fdisk (util-linux 2.23.2)......
###依次按
n            ###创建分区
p            ###创建主分区
回车         ###默认主分区1
回车         ###默认块大小
回车         ###默认主分区大小
w            ###保存分区信息
正在同步磁盘。
[root@node1 ~]# mkfs -t ext4 /dev/sdb1   ###格式化
[root@node1 ~]# mkdir /data     ##创建挂载点
[root@node1 ~]# vim /etc/fstab    ###挂载
/dev/sdb1         /data          ext4    defaults        0 0
[root@node1 ~]# mount -a   ##重新加载fstab
[root@node1 ~]# df -hT
/dev/sdb1      ext4       20G   45M   19G    1% /data   ##已经挂载
  • 将gfsrepo 软件上传到/opt目下
  • 打开xftp软件，直接将gfsrepo文件拖到/opt目录即可

在这里插入图片描述

  • 搭建本地YUN仓库，安装GLFS软件，启动GFS
[root@node1 yum.repos.d]#  rm -rf /etc/yum.repos.d/*.repo
[root@node1 yum.repos.d]#  vi /etc/yum.repos.d/local.repo
[GLFS]
name=glfs
baseurl=file:///opt/gfsrepo
gpgcheck=0
enabled=1
[root@node1 yum.repos.d]# yum clean all
[root@node1 yum.repos.d]# yum list
[root@node1 yum.repos.d]#  yum -y install glusterfs glusterfs-server glusterfs-fuse glusterfs-rdma     ###安装
[root@node1 yum.repos.d]#  systemctl start glusterd.service                                           ###启动
[root@node1 yum.repos.d]#  systemctl enable glusterd.service                                          ###开机自启
[root@node1 yum.repos.d]#  systemctl status glusterd.service    
Active: active (running) since 三 2020-02-19 05:18:22 CST; 17s ago
 Main PID: 38633 (glusterd)    ###已经running
  • 关闭防火墙，创建集群
  • 添加节点服务器
[root@node1 yum.repos.d]# systemctl stop firewalld.service   ###关闭防火墙
[root@node1 yum.repos.d]# setenforce 0
[root@node1 yum.repos.d]# gluster peer probe node1
[root@node1 yum.repos.d]# gluster peer probe node2
[root@node1 yum.repos.d]# gluster peer status        ####查看集群状态
Number of Peers: 1

Hostname: node2
Uuid: 6df47b61-0262-47da-877c-d7aebd86361f
State: Peer in Cluster (Connected)
  • 创建分布式复制卷并启动
[root@node1 yum.repos.d]# gluster volume create kvmdata replica 2 node1:/data node2:/data force
[root@node1 yum.repos.d]# gluster volume info kvmdata	
[root@node1 yum.repos.d]# gluster volume start kvmdata
4.2、部署KVM虚拟化平台
  • 将kvm宿主机部署成GFS客户端
  • 用xftp将gfsrepo软件上传到/opt目下

在这里插入图片描述

  • 挂载虚拟机CD源，搭建本地YUN仓库
[root@kvm yum.repos.d]# mount /dev/sr0    /mnt
[root@kvm yum.repos.d]#  rm -rf /etc/yum.repos.d/*.repo
[root@node1 yum.repos.d]#  vi /etc/yum.repos.d/local.repo
[local]
name=test
baseurl=file:///mnt
enabled=1
gpgcheck=0

[GLFS]
name=glfs
baseurl=file:///opt/gfsrepo
gpgcheck=0
enabled=1
[root@kvm yum.repos.d]# yum clean all
[root@kvmyum.repos.d]# yum list
[root@kvm yum.repos.d]# yum -y install glusterfs glusterfs-server glusterfs-fuse glusterfs-rdma     ###安装
[root@kvm yum.repos.d]# systemctl start glusterd.service                                           ###启动
[root@kvmyum.repos.d]# systemctl enable glusterd.service                                          ###开机自启
  • 创建主机名和IP地址映射关系
[root@node1 ~]# vim /etc/hosts
192.168.100.41  node1
192.168.100.42  node2
  • 永久挂载GFS文件系统，将分布式复制卷挂载过来
[root@kvm opt]# mkdir /kvmdata
[root@kvm opt]# vim /etc/fstab
node1:kvmdata           /kvmdata                glusterfs defaults,_netdev      0 0
[root@kvm opt]#  mount -a    ###重新加载
  • 安装KVM模块，启动libvirtd工具
yum groupinstall -y "GNOME Desktop"    ####安装 GNOME 桌面环境  如果装了图形界面不需要装了
yum -y install qemu-kvm            ####KVM 模块
yum -y install qemu-kvm-tools     ####KVM 调试工具,可不安装
yum -y install virt-install               ####构建虚拟机的命令行工具
yum -y install qemu-img               ####qemu 组件,创建磁盘、 启动虚拟机等
yum -y install bridge-utils            ####网络支持工具
yum -y install libvirt                     ####虚拟机管理工具
yum -y install virt-manager            ####图形界面管理虚拟机
[root@kvm ~]# systemctl start libvirtd
[root@kvm ~]# systemctl enable libvirtd  
[root@kvm ~]# ln -sf /lib/systemd/system/graphical.target /etc/systemd/system/default.target
[root@kvm ~]# init 6

注意：

笔记本电脑的bios里面要调CPU虚拟化
创建虚拟机的时候，CPU要勾选虚拟化
cat /proc/cpuinfo | grep vmx        ###查看CPU是否支持虚拟化
  • 设置KVM网络为桥接模式
    桥接模式， 这种模式允许虚拟机像一台独立的主机一样拥有网络， 外部的机器可以直接访问到虚拟机内部， 但需要网卡支持， 一般有线网卡都支持。
[root@kvm ~]# systemctl stop firewalld.service ###关闭防火墙
[root@kvm ~]# setenforce 0

[root@kvm ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33
TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=none
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=no
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=0e5a02f3-25d6-4222-a2c7-3303cc76117a
DEVICE=ens33
ONBOOT=yes
#IPADDR=192.168.100.43
#PREFIX=24
#GATEWAY=192.168.100.1
BRIDGE=br0

[root@kvm ~]# vim /etc/sysconfig/network-scripts/ifcfg-br0
TYPE=Bridge       
BOOTPROTO=static
DEFROUTE=yes
PEERDNS=yes
PEERROUTES=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_PEERDNS=yes
IPV6_PEERROUTES=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=br0
DEVICE=br0
ONBOOT=yes
IPADDR=192.168.100.44
NETMASK=255.255.255.0
GATEWAY=192.168.100.1
[root@kvm ~]# systemctl restart network   ##重启网卡
  • 管理KVM，创建虚拟机
[root@kvm ~]# mkdir -p /kvmdata/iso   ####上传镜像centos 7的镜像
[root@kvm ~]# mkdir -p /kvmdata/store       ####虚拟机存储
  • 上传centos7镜像到/kvm/data/iso中

在这里插入图片描述

  • 创建存储池和存储卷
[root@kvm ~]# virt-manager

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

- 同理添加iso目录存储池

在这里插入图片描述

  • 在"cunchuchi"池子中创建存储卷

在这里插入图片描述
在这里插入图片描述

  • 开始创建虚拟机

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

五、实验验证

  • 在GFS节点上查看目录里是否存在虚拟机文件,可以看见虚拟机文件已经分布式复制的方式存在2个节点中
[root@node1 ~]# ll /data/store/
总用量 1253468
-rw-------. 2 qemu qemu 21478375424 2月  19 08:44 aaa.qcow2

[root@node2 ~]# ll /data/store/
总用量 1253468
-rw-------. 2 qemu qemu 21478375424 2月  19 08:44 aaa.qcow2
  • 关闭节点1服务器，发现kvm平台中的虚拟机仍然可以正常运行。
时光慢旅
关注
  • 6
    点赞
  • 踩
  • 24
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
KVM虚拟化解决方案系列之KVM部署篇（1-4）
鵬城大聖的博客
03-25 4876
KVM虚拟化解决方案系列之KVM部署篇
KVM高级功能部署
lxiaoyouyouj的博客
04-01 922
** KVM高级功能部署 ** 技能目标： 学会使用 KVM 静态迁移 学会配置 KVM 基于共享存储的动态迁移 学会配置 KVM 基于数据块的动态迁移 熟悉 KSM 内核同页合并 ** 1.1 案例概述 **
KVM+GFS分布式存储系统构建KVM高可用
最新发布
m0_73823239的博客
04-09 1064
GlusterFS 分布式文件系统是由 Gluster 公司的创始人兼首席技术官 Anand Babu Periasamy 编写。一个可扩展的分布式文件系统，可用于大型的、分布式的、对大量数据进行访问的应用。它可运行于廉价的普通硬件上，并提供容错功能；也可以给大量的用户提供 总体性能较高的服务。GlusterFS 可以根据存储需求快速调配存储，内含丰富的自动故障转移功能，且摒弃集中元数据服务器的思想。适用于数据密集型任务的可扩展网络文件系统， 且免费开源。
KVM虚拟化开源高可用方案(三)glusterfs
weixin_33896069的博客
08-29 384
   说明：设计目的：1. 集群设计虚拟机容量70-100台,占用1个机柜，全部由1U服务器组成，其中存储服务器6台，300G*8，节点服务器10台；2. 虚拟机可以在KVM集群宿主机之间迁移；glusterfs集群架构：1. 存储服务器和节点服务器组成，存储服务器通过哈希算法，可以弹性增加或者减少，并实现冗余；2. 存储服务器每台机器至少需要4块网卡，如果机器只有板载的2块网卡，需要在加1块双口...
基于ISCSI共享存储的KVM高可用群集配置
weixin_43226231的博客
08-14 1267
实验目的：运行的虚拟机可以在线平滑迁移，不会终端虚拟机运行的业务 高可用架构：pacemaker+corosync 并由pcs进行管理 系统环境：三台机器都是最新的centos7.4 所需组件： DLM，gfs2，clvm,pcs，pacemeker，corosync，libvirtd，qemu，qemu-img 约束关系：DLM >> CLVM >> GFS2文件系统 ...
KVM管理（二）
等风来也chen
04-02 644
创建虚拟机 应用程序–》虚拟系统管理器 点击图标创建虚拟机 给虚机命名为 kvm1，这里选择从哪里启动虚机。如果是安装新的 O可以选择第一项。如果已经有安装好的镜像文件，选最后一项（如下图）。virt-manager创建 选择前进，后续界面如下 如果里面没有镜像 可以参考https://blog.csdn.net/weixin_44267608/article/details/889...
KVM+GFS分布式存系统构建KVM高可用
01-07
文章目录前言一：理论概述1.1：Glusterfs 简介1.2：Glusterfs 特点二：KVM高可用构建实操2.1：环境2.2：实验目的2.3：实验过程2.3.1：构建GFS集群2.3.2：安装KVM虚拟机2.3.3：GFS集群节点服务器添加磁盘2.3.4：KVM宿...
基于GFS文件系统存储群集实现KVM的高可用以及热迁移
01-09
这个架构是利用GFS文件系统分布式复制卷的容错性，结合KVM的虚拟化，把虚拟机的文件存储在GFS的分布式复制卷上，实现KVM上的虚拟机高可用 实验原理 利用Glusterfs的分布式复制卷，对KVM虚拟机进行分布存储和冗余功能...
KVM+RHCS+ORACLE11GR2+HA+GFS2
06-18
主机工程师,数据库DBA课程简介在本地自己的操作系统上，完全模拟生产环境，让学员学会红帽6.9怎样搭建rhcs集群，以及如何创建kvm虚拟机，如何创建GFS2集群文件系统，以及如何创建oracle 11gR2的ha高可用集群。...
kvm集群搭建.docx
08-22
搭建kvm高可用集群，实现kvm动态迁移，当一个节点死掉后，自动迁移到另外一个节点
在CentOS7搭建KVM虚拟化平台(三种方式)
01-10
KVM 全称是基于内核的虚拟机（Kernel-based Virtual Machine），它是一个 Linux的一个内核模块，该内核模块使得 Linux变成了一个Hypervisor：它由 Quramnet开发，该公司于 2008年被 Red Hat 收购  KVM的整体结构： 从GUI到Linux内核，包括以下五个组件： 1) virt-manager 一个用来管理VM的GUI/CUI用户接口;它使用libvirt api 调用VM的各种功能。 2) libvirt 一个工具及接口，作为较通用的服务器虚拟化软件，它支持Xen，VMware ESXi/GSX，当然，还有QEMU/KVM。 3
CentOS7.2下安装部署OpenStack+KVM 云平台虚拟化环境详解
11-21
CentOS7.2下安装部署OpenStack+KVM 云平台虚拟化环境详解
rhcs+iscsi+gfs2+lvs部署双机热备
03-27
linux集群，rhcs、iscsi和gfs2提供共享存储，通过lvs搭建基于共享存储的双机热备web服务，根据lvs的工作模式可选负载均衡、互为主备的工作模式。
linux kvm集群 漂移,KVM虚拟化集群技术概述
weixin_39587822的博客
05-14 654
一、 虚拟化集群介绍、设计思路及架构使用虚拟化集群的目标是克服单机虚拟化的局限性，利用技术手段提高虚拟机可用性，最终达到业务不中断或者减少中断时间，确保业务数据更安全的目标。1. 虚拟化集群介绍1)什么是虚拟化集群虚拟机集群最显著的特征是有共享存储，因为有了共享存储，虚拟机就可以实现非常快速的在线迁移，并在虚拟化层配置高可用。笔者在生产环境使用的集群有两种存储方式，基于商业存储和基于开源分布式文件...
基于 KVM 实现两种高可用 Web 站点架构（全）
学渣角鹿白的博客
11-16 1481
一：实验环境准备 1.1：实验网络 外部网络：192.168.1.0/24（DNS&NTP服务器：192.168.1.254） 内部网络：172.16.1.0/24（DNS&NTP服务器：172.16.1.253） KVM 虚拟机采用桥接网络，和物理机共享内外网环境。 1.2：VMware Workstation 准备虚拟机 创建2台虚拟机： 2×2 cpu，内存4G，4块网卡（2块桥接模式用于谅解外部网络、2块仅主机模式用于创建内部网络。 最小化安装 CentOS 7.2，并进行初始化
iSCSI 多路径实现 KVM 高可用
weixin_33753845的博客
06-15 287
iSCSI 多路径实现 KVM 高可用本文我们将以 Linux 平台为例，分别使用两台 Linux 主机来运行 iSCSI 目标和 iSCSI 启动器，然后在其中一台运行 iSCSI 启动器的主机上运行 KVM 虚拟机，两台主机之间存在多个网络连接，以此来实现提高 KVM 虚拟机的可用性。回页首配置 iSCSI（target 和 initiator）iSCSI (Intern...
KVM+GFS 分布式存储 系统构建KVM高可用
lxiaoyouyouj的博客
04-01 592
** KVM+GFS 分布式存储系统构建KVM高可用 ** ** 技能目标： 学会部署 KVM+GFS 分布式存储高可用 案例分析 ** 案例概述 目前有很多公司大规模使用KVM虚拟机运行业务，为了保证公司虚拟姐能够安全稳定运行，决定采用KVM+GlusterFS模式以保证虚拟机存储的分布部署以及分布冗余 当虚拟机文件损坏，或者丢失时有实时备份，保证业务正常运行 案例前置知识点 ** 案例环境 ** 1．案例环境 公司由于大规模使用 KVM 虚拟机来运行业务，为了保证公司虚拟机能够安全稳定运行，决定采

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值