本文结合具体代码对 Linux 内核中的 device mapper 映射机制进行了介绍。Device mapper 是 Linux 2.6内核中提供的一种从逻辑设备到物理设备的映射框架机制,在该机制下,用户可以很方便的根据自己的需要制定实现存储资源的管理策略,当前比较流行的Linux 下的逻辑卷管理器如 LVM2(Linux Volume Manager 2 version)、EVMS(Enterprise Volume Management System)、dmraid(Device Mapper Raid Tool)等都是基于该机制实现的。理解该机制是进一步分析、理解这些卷管理器的实现及设计的基础。通过本文也可以进一步理解 Linux 系统块一级IO的设计和实现。
Device Mapper是linux2.6内核中支持逻辑卷管理的通用设备映射机制,它为实现用于存储资源管理的块设备提供了一个高度模块化的内核架构,如图一所示:
在内核中它通过一个一个模块化的target driver插件实现对IO请求的过滤或者重新定向等工作,当前已经实现的target driver 插件包括软raid、软加密、逻辑卷条带、多路径、镜像、快照等,图中linear、mirror、snapshot、multipath表示的就是这些target driver。Device mapper进一步体现了在linux内核设计中策略和机制分离的原则,将所有与策略相关的工作放到用户空间完成,内核中主要提供完成这些策略所需要的机制。Device mapper用户空间相关部分主要负责配置具体的策略和控制逻辑,比如逻辑设备和哪些物理设备建立映射,怎么建立这些映射关系等等,而具体过滤和重定向IO请求的工作由内核中相关代码完成。因此整个device mapper机制由两部分组成——内核空间的device mapper驱动,用户空间的device mapper库以及它提供的dmsetup工具。在下文中,我们分内核和用户空间两部分进行介绍。
内核部分
Device mapper的内核相关代码已经作为Linux 2.6内核发布版的一部分集成到内核源码中了,相关代码在内核源码的driver/md/目录中,其代码文件可以划分为实现device mapper内核中基本架构的文件和实现具体映射工作的 target driver 插件两部分。文章下面的分析结构主要基于上述源码文件得到的。
重要概念
Device mapper在内核中作为一个块设备驱动被注册的,它包括三个重要的对象概念,mapped device、映射表、target device。Mapped device是一个逻辑抽象,可以理解成为内核向外提供的逻辑设备,它通过映射表描述的映射关系和target device建立映射。从Mapped device到一个target device 的映射表由一个多元组表示,该多元组由表示mapped device逻辑的起始地址、范围和表示在target device 所在物理设备的地址偏移量以及target类型等变量组成(这些地址和偏移量都是以磁盘的扇区为单位的,即512个字节大小)。Target device 表示的是mapped device 所映射的物理空间段,对mapped device所表示的逻辑设备来说,就是该逻辑设备映射到的一个物理设备。 Device mapper中这三个对象和target driver插件一起构成了一个可迭代的设备树。在该树形结构中的顶层根节点是最终作为逻辑设备向外提供的mapped device,叶子节点是target device所表示的底层物理设备。最小的设备树由单个mapped device 和target device 组成。每个target device 都是被mapped device 独占的,只能被一个mapped device使用。一个mapped device 可以映射到一个或者多个target device上,而一个mapped device又可以作为它上层mapped device的target被使用,该层次在理论上可以在device mapper架构下无限迭代下去。
在图2 中我们可以看到mapped device1 通过映射表和a、b、c三个target device 建立了映射关系,而target device a 又通过mapped device 2演化过来,mapped device 2 通过映射表和target device d建立映射关系。