libvirt锁定机制virtlockd介绍

最新推荐文章于 2022-07-05 12:07:19 发布
最新推荐文章于 2022-07-05 12:07:19 发布
阅读量1.4k 收藏 1
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/allway2/article/details/102783588
版权

本页描述了将virtlockd 服务用作 虚拟机磁盘互斥的锁定驱动程序插件。

virtlockd背景 

virtlockd守护程序是一个单用途二进制文件，专门用于代表正在运行的虚拟机获取和持有锁的任务。它旨在提供低开销，便携式锁定方案可在虚拟化主机上以最小的配置开销立即使用。它利用POSIX fcntl咨询锁定功能来保持锁定，大多数常用的文件系统都支持该锁定。

virtlockd守护程序设置 

在大多数操作系统中，virtlockd守护程序本身不需要任何前期配置工作。当存在libvirtd时，默认情况下会安装它，并注册一个systemd套接字单元，以便在首次需要时自动启动守护程序。但是，对于早于systemd的OS，有必要在启动libvirtd之前在引导时启动它。在RHEL / Fedora发行版上，可以通过以下方式实现

# chkconfig virtlockd on

# service virtlockd start

以上说明适用于以特权方式运行的virtlockd实例，并由以特权方式运行的libvirtd守护程序使用。如果以非特权用户身份运行libvirtd，它将始终自动也产生非特权virtlockd守护程序实例。这根本不需要任何设置。

libvirt锁定插件配置 

一旦virtlockd守护程序运行或设置为自动启动，下一步就是配置libvirt lockd插件。每个使用virtlockd的libvirt驱动程序都有一个单独的配置文件。对于QEMU，我们将进行编辑 /etc/libvirt/qemu-lockd.conf

lockd插件的默认行为是直接在与guest虚拟机<disk>元素关联的虚拟磁盘映像上获取锁。这样可以确保它无需配置即可立即使用，从而为共享文件系统（例如NFS）上的磁盘映像提供锁定。它不为块设备支持的存储提供任何跨主机保护，因为在/ dev中的设备节点上获取的锁仅适用于主机。也可能是保存磁盘映像的文件系统不支持fcntl锁的情况。

为了解决这些问题，可以告诉lockd获取间接文件上的锁。本质上，锁定将计算完全限定路径的SHA256校验和，并在给定目录中创建一个长度为零的文件，其文件名为校验和。然后它将获得对该文件的锁定。假设分配给来宾的块设备正在使用稳定路径（例如/ dev / disk / by-path / XXXXXXX），则这将允许锁在主机之间应用。可以通过设置配置设置来启用此功能，该设置指定在其中创建锁定文件的目录。所引用的目录当然应该放置在共享文件系统（例如NFS）上，所有可以看到共享块设备的主机都可以访问该文件系统。

$ su - root

# augtool -s set \

  /files/etc/libvirt/qemu-lockd.conf/file_lockspace_dir \

  "/var/lib/libvirt/lockd/files"

   

如果客户机将LVM和SCSI块设备用于其虚拟磁盘，则每个设备都有一个唯一的标识符。可以告诉lockd使用此UUID作为获取锁的基础，而不是文件名的SHA256和。这样的好处是，即使每个主机上给定块设备的文件路径不同，锁定保护也将起作用。

$ su - root

# augtool -s set \

  /files/etc/libvirt/qemu-lockd.conf/scsi_lockspace_dir \

  "/var/lib/libvirt/lockd/scsi"

# augtool -s set \

  /files/etc/libvirt/qemu-lockd.conf/lvm_lockspace_dir \

  "/var/lib/libvirt/lockd/lvm"

   

重要的是要记住，在/etc/libvirt/qemu-lockd.conf虚拟机上启动任何虚拟机之前，必须将对文件所做的更改 传播到所有主机。这样可以确保所有主机都使用相同的锁定机制

QEMU / KVM驱动程序配置 

从版本1.0.2开始，QEMU驱动程序可以使用virtlockd插件。但是，现成的配置当前使用nop锁管理器插件。为了获得磁盘保护，因此必须重新配置QEMU以激活锁定的 驱动程序。这可以通过编辑QEMU驱动程序配置文件（/etc/libvirt/qemu.conf）并更改lock_manager配置可调参数来实现。

$ su - root

# augtool -s  set /files/etc/libvirt/qemu.conf/lock_manager lockd

# service libvirtd restart

   

每次启动guest虚拟机时，virtlockd守护程序都将直接获取磁盘文件上的锁，或者基于SHA256 sum在已配置的后备目录之一中获取锁。要检查是否已按预期获取锁，可以运行lslocks工具。

# lslocks
COMMAND           PID  TYPE SIZE MODE  M      START        END PATH
dmeventd          444 POSIX   4B WRITE 0          0          0 /run/dmeventd.pid
(unknown)         675 FLOCK      WRITE 0          0          0 /run/lock...
rpcbind           693 FLOCK      WRITE 0          0          0 /run/rpcbind.lock
lxcfs             728 POSIX   4B WRITE 0          0          0 /run/lxcfs.pid
iscsid            908 POSIX   4B WRITE 0          0          0 /run/iscsid.pid
(unknown)        1269 FLOCK      WRITE 0          0          0 /run...
(unknown)        1260 FLOCK      WRITE 0          0          0 /run...
(unknown)        1261 FLOCK      WRITE 0          0          0 /run...
(unknown)        1428 FLOCK      WRITE 0          0          0 /run...
(unknown)        1433 FLOCK      WRITE 0          0          0 /run...
gnome-shell      2673 FLOCK      WRITE 0          0          0 /run/user/0/wayland-0.lock
virtlockd        3229 POSIX   4B WRITE 0          0          0 /run/virtlockd.pid
3                 891 POSIX      WRITE 0          0          0 /run/lxc/var/lib/lxc/monitor-fifo
libvirtd          917 POSIX   3B WRITE 0          0          0 /run/libvirtd.pid
(unknown)         953 FLOCK      WRITE 0          0          0 /...
master           1253 FLOCK  33B WRITE 0          0          0 /var/spool/postfix/pid/master.pid
master           1253 FLOCK  33B WRITE 0          0          0 /var/lib/postfix/master.lock
cron             1263 FLOCK   5B WRITE 0          0          0 /run/crond.pid
(unknown)        1429 FLOCK      WRITE 0          0          0 /run...
(unknown)        1438 FLOCK      WRITE 0          0          0 /run...
tracker-store    2908 POSIX 3.6M READ  0 1073741826 1073742335 /root/.cache/tracker/meta.db
tracker-store    2908 POSIX  32K READ  0        128        128 /root/.cache/tracker/meta.db-shm
tracker-miner-f  2899 POSIX 3.6M READ  0 1073741826 1073742335 /root/.cache/tracker/meta.db
tracker-miner-f  2899 POSIX  32K READ  0        128        128 /root/.cache/tracker/meta.db-shm
tracker-miner-a  2902 POSIX 3.6M READ  0 1073741826 1073742335 /root/.cache/tracker/meta.db
tracker-miner-a  2902 POSIX  32K READ  0        128        128 /root/.cache/tracker/meta.db-shm
virtlogd         3207 POSIX   4B WRITE 0          0          0 /run/virtlogd.pid
virtlockd        3229 POSIX  40G WRITE 0          0          0 /var/lib/libvirt/images/win2k16.qcow2

# lslocks
COMMAND           PID  TYPE SIZE MODE  M      START        END PATH
dmeventd          444 POSIX   4B WRITE 0          0          0 /run/dmeventd.pid
(unknown)         675 FLOCK      WRITE 0          0          0 /run/lock...
rpcbind           693 FLOCK      WRITE 0          0          0 /run/rpcbind.lock
lxcfs             728 POSIX   4B WRITE 0          0          0 /run/lxcfs.pid
iscsid            908 POSIX   4B WRITE 0          0          0 /run/iscsid.pid
(unknown)        1269 FLOCK      WRITE 0          0          0 /run...
(unknown)        1260 FLOCK      WRITE 0          0          0 /run...
(unknown)        1261 FLOCK      WRITE 0          0          0 /run...
(unknown)        1428 FLOCK      WRITE 0          0          0 /run...
(unknown)        1433 FLOCK      WRITE 0          0          0 /run...
gnome-shell      2673 FLOCK      WRITE 0          0          0 /run/user/0/wayland-0.lock
virtlockd        7588 POSIX      WRITE 0          0          0 /var/lib/libvirt/lockd/files/826549533d536d3457793a12babdc6f792066d2edb7e7e6292e0d450b9ef1cbd
3                 891 POSIX      WRITE 0          0          0 /run/lxc/var/lib/lxc/monitor-fifo
(unknown)         953 FLOCK      WRITE 0          0          0 /...
master           1253 FLOCK  33B WRITE 0          0          0 /var/spool/postfix/pid/master.pid
master           1253 FLOCK  33B WRITE 0          0          0 /var/lib/postfix/master.lock
cron             1263 FLOCK   5B WRITE 0          0          0 /run/crond.pid
(unknown)        1429 FLOCK      WRITE 0          0          0 /run...
(unknown)        1438 FLOCK      WRITE 0          0          0 /run...
tracker-store    2908 POSIX 3.6M READ  0 1073741826 1073742335 /root/.cache/tracker/meta.db
tracker-store    2908 POSIX  32K READ  0        128        128 /root/.cache/tracker/meta.db-shm
tracker-miner-f  2899 POSIX 3.6M READ  0 1073741826 1073742335 /root/.cache/tracker/meta.db
tracker-miner-f  2899 POSIX  32K READ  0        128        128 /root/.cache/tracker/meta.db-shm
tracker-miner-a  2902 POSIX 3.6M READ  0 1073741826 1073742335 /root/.cache/tracker/meta.db
tracker-miner-a  2902 POSIX  32K READ  0        128        128 /root/.cache/tracker/meta.db-shm
virtlogd         3207 POSIX   4B WRITE 0          0          0 /run/virtlogd.pid
virtlockd        7588 POSIX   4B WRITE 0          0          0 /run/virtlockd.pid
libvirtd         7645 POSIX   4B WRITE 0          0          0 /run/libvirtd.pid

allway2
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Libvirt使用sanlock错误记录
木简熙的博客
04-11 617
1.error: error: Failed to create domain from test_sanlock.xml error: internal error: Process exited prior to exec: libvirt: Lock Driver error : Unable to query sector size /var/lib/libvirt...
Libvirt 介绍
12-11
Libvirt 是一个开源项目，提供了一组 API、工具和库，用于管理和控制虚拟化平台。在 OpenStack 环境中，Libvirt 是一个至关重要的组件，它为各种虚拟化技术（如 KVM、Xen、QEMU 和 LXC）提供了统一的接口，使得 ...
libvirt事件机制
02-28 3642
1 libvirt事件机制事件机制是libvirt最为核心的一种机制。libvirt通常可以看做两个部分，libvirt客户端和libvirt服务端。libvirt客户端就是我们平时所熟识的libvirt接口部分，是通过提供libvirt共享库以及头文件的形式直接给客户使用的部分，相当于libvirt的眼睛和耳朵，接受客户的各种命令；libvirt服务端就是我们称作libvirtd的守护进程，也是...
libvirt的event监听机制和代码实现
Jacobsea的博客
07-05 1593
libvirt是目前使用最为广泛的对KVM虚拟机继续管理的工具和应用程序接口，而且一些常用的虚拟机管理工具（如virsh、virt-manager等）和云计算框架平台（如：OpenStack、ZStack等）都在底层使用libvirt的应用程序接口。 libvirt是为了更方便地管理平台虚拟化技术而设计的开放源代码的应用程序接口(libvirt API)、守护进程(libvirtd)和管理工具(virsh)，它不仅提供了对虚拟化客户机的管理，也提供了对虚拟化网络和存储的管理。...
libvirt job 锁机制分析
wllabs的专栏
05-30 759
libvirt 到后面 driver。每个方法里都有很多相同的，比如 qemuDomObjFromDomain qemuDomainObjBeginJob qemuDomainObjEnterMonitor qemuDomainObjExitMonitor qemuDomainObjEndJob virDomainObjEndAPI。 这些都是后面对应方法必须写的，保证同一个vm只能有一...
虚拟机锁管理器
allway2的博客
10-28 399
虚拟机锁管理器 锁管理器插件 Libvirt包含用于确保使用主机资源的虚拟机之间相互排斥的框架。通常，这用于防止两个VM进程同时访问同一磁盘映像，因为如果来宾未使用群集感知的文件系统，这将导致数据损坏。 锁管理器插件 锁管理器框架具有可插拔的体系结构，以允许使用不同的锁技术。 nop 这是一个“绝对不执行”的实现，它什么也不做。如果不需要虚拟机之间的互斥，或者在管理堆栈中的另一个级别解...
libvirt原理
weixin_30498921的博客
08-01 324
引用原文: https://blog.csdn.net/BtB5e6Nsu1g511Eg5XEg/article/details/80142155 　　libvirt是目前使用最为广泛的针对KVM虚拟机进行管理的工具和API。Libvirtd是一个daemon进程，可以被本地和远程的virsh(命令行工具)调用，Libvirtd通过调用qemu-kvm操作管理虚拟机。libvi...
Libvirt虚拟化技术介绍.pdf
10-10
Libvirt虚拟化技术介绍 Libvirt虚拟化技术是当前使用最广泛的对KVM虚拟机进行管理的工具和应用程序接口。Libvirt支持多种虚拟化方案，既支持包括KVM、QEMU、Xen、VMware、VirtualBox等在内的平台虚拟化方案，又支持...
Libvirt虚拟化技术介绍.pptx
10-10
Libvirt虚拟化技术介绍 Libvirt 是目前使用最为广泛的对 KVM 虚拟机进行管理的工具和应用程序接口。尽管 Libvirt 项目最初是为 Xen 设计的一套 API，但是目前对 KVM 等其他 Hypervisor 的支持也非常好。Libvirt ...
Qemu KVM and Libvirt
04-29
Qemu KVM and Libvirt Qemu KVM 和 Libvirt 是虚拟化领域中的三个重要概念，分别是虚拟机监控器、内核模块和虚拟机管理工具。本文将对这三个概念进行解析，并探讨它们之间的关系。 虚拟化的基本类型 虚拟化可以...
申威平台libvirt使用指南
最新发布
09-04
下面将对申威平台libvirt使用指南的主要知识点进行详细介绍： 1. 软件介绍 libvirt是一个开源的虚拟化管理工具，由Red Hat公司开发，提供了统一的API来管理各种虚拟化平台。libvirt支持多种虚拟化平台，包括KVM、...
03-libvirt环境中遇到的问题
weixin_40462049的博客
06-26 4217
1、虚拟机关机出现报错： error: Timed out during operation: cannot acquire state change lock (held by qemuProcessReconnect) 原因：某一个现场被挂起，导致的锁未被释放，一般这种情况需要gdb调试，出现在自己编译的qemu环境中比较多，实际生产环境建议使用当前系统的发行版 2、执行命令vi...
virtlogd段错误
卧龙居
01-19 695
/usr/sbin/virtlogd无法启动，使用-v报错：segfault:core dump。 排查发现是gnutls库与libvirt版本不兼容导致的。 yum updategnutls即可。
服务器上的虚拟机开启失败
罗小黑嘛
06-26 1762
问题描述：在服务器上安装好虚拟机后，虚拟机可以正常使用，但是重启服务器后报如下错误： virsh start win7_64_101_360 错误：开始域 win7_64_101_360 失败 错误：将插槽连接到 '/var/run/libvirt/virtlogd-sock' 失败: 拒绝连接 此时运行命令service libvirtd status 也可以看到上...
openstack O版 控制节点 创建网络
beisun3272的博客
07-11 629
四．创建网络[root@controller ~]# source admin-openrc 创建flat模式的public网络，注意这个public是外出网络，必须是flat模式的[root@controller ~]# neutron --debug net-create --shared provider --router:external True --provider:network_t...
/var/run/libvirt/virtlogd-sock': No such file or directory
wllabs的专栏
09-14 6454
adsfasdf 启动实例报错，说是没有 virtlogd-sock，奇了怪，这个是什么服务 [root@nova02 a9a2bb9b-5e7b-469f-b641-543a3153c9c3]# virsh start instance-0000023e error: Failed to start domain instance-0000023e error: Failed to conn
VM的迁移
weixin_34414196的博客
06-04 536
迁移有两种类型的迁移： 离线迁移 活动或在线迁移 迁移需要注意的事项： 尽量用共享存储，就算没有共享存储你也得把存储沲的名字和路径尽量一致吧。 假如使用了比如FC，ISCSI，LVM等等。那么在要迁移的两台主机上都应该有相同的存储。 两台hypervisor主机应该有相同的网络。 网桥，配置两台主机通信的，也应该在两台hypervisior上有效。 假如两台libvirt或qemu-kvm的...
libvirt 问题解决记录集
热门推荐
chenyulancn的专栏
10-24 3万+
本篇记录在使用libvirt的时候遇到的一些情况,即解决方法. 出现Permission denied 1 2 3 [root@localhost vm]# virsh start centos error: Failed to start domain centos error: internal error process exited whi
virt-manager linux上虚拟机安装错误处理：error: Failed to connect socket to '/var/run/libvirt/libvirt-sock': No
白衣
06-02 1万+
error: Failed to connect socket to '/var/run/libvirt/libvirt-sock': No such file or directory 文件有可能存在，但是找不到(我的就是这样 明明有这个文件，还说找不到，ln -s // 也不行) 我是这样处理的，1我去换成ustc的源 sudo vi /etc/apt/sourc
libvirt 0.9 C语言应用开发指南
在介绍部分，作者概述了libvirt的基本功能和目标，并提供了一个术语表，以便读者对相关技术术语有清晰的理解。接着，书中详细阐述了libvirt的架构，包括其设计目标、主要组件和工作原理。这部分内容对于理解libvirt...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值