浅学lvm以及lvm在ceph中的应用

最新推荐文章于 2024-02-19 09:42:10 发布
最新推荐文章于 2024-02-19 09:42:10 发布
阅读量279 收藏
点赞数
文章标签： ceph
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_30762005/article/details/133662232
版权

一、Linux下的磁盘管理之LVM的基本组成以及使用

传统分区使用固定大小分区，重新调整大小十分麻烦。但是，LVM可以创建和管理“逻辑”卷，而不是直接使用物理硬盘。可以让管理员弹性的管理逻辑卷的扩大缩小，操作简单，而不损坏已存储的数据。可以随意将新的硬盘添加到LVM，以直接扩展已经存在的逻辑卷。LVM并不需要重启就可以让内核知道分区的存在。

1、基本组成
  • 物理卷（PV，Physical Volume）     
    一个可供存储LVM的块设备. 如硬盘分区（MBR或GPT分区）、SAN 的硬盘、RAID 或 LUN，一个回环文件, 一个被内核映射的设备 (例如 dm-crypt)，它包含一个特殊的LVM头，它是 LVM 构建的实际硬件或存储系统。
  • 卷组（VG，Volume Group）
    卷组是对一个或多个物理卷的集合，并在设备文件系统中显示为 /dev/VG_NAME。        
  • 逻辑卷（LV，Logical Volume）
    逻辑卷是可供系统使用的最终元设备，它们在卷组中创建和管理，由物理块组成，实际上就是一个虚拟分区，并显示为 /dev/VG_NAME/LV_NAME，通常在其上可以创建文件系统。
  • 物理块（PE,Physical Extends）
    一个卷组中最小的连续区域(默认为4 MiB)，多个物理块将被分配给一个逻辑卷。你可以把它看成物理卷的一部分，这部分可以被分配给一个逻辑卷

2、LVM的使用
  • 准备磁盘分区  通过使用fdisk，创建磁盘分区。我们需要创建3个1G分区，注意，并不要求分区的大小一致。同样，分区需要使用‘8e’类型来使他们可用于LVM。
 fdisk /dev/sdb 
Command (m for help): n ## 新建
Command action
   e   extended
   p   primary partition (1-4)
p ## 主分区
 
Partition number (1-4): 1 ## 分区号
First cylinder (1-1044, default 1):  ## 回车用默认的1
Last cylinder, +cylinders or +size{K,M,G} (1-1044, default 1044): +1G ## 大小
 
Command (m for help): t ## 改变类型
Selected partition 1
Hex code (type L to list codes): 8e ## LVM 的分区代码
Changed system type of partition 1 to 8e (Linux LVM)
  • 准备物理卷   

刚创建的分区是用来储存物理卷的。LVM可以使用不同大小的物理卷。

# pvcreate /dev/sdb1
# pvcreate /dev/sdb2
# pvcreate /dev/sdb3

使用下列命令检查物理卷的创建情况。下面截取部分输出。"/dev/sdb2"是一个新的"1.01 GiB"物理卷。

# pvdisplay 


  --- NEW Physical volume ---
  PV Name               /dev/sdb2
  VG Name
  PV Size               1.01 GiB
  Allocatable           NO
  PE Size               0
  Total PE              0
  Free PE               0
  Allocated PE          0
  PV UUID               jszvzz-ENA2-g5Pd-irhV-T9wi-ZfA3-0xo092
  • 准备卷组

下列命令用来创建名为'volume-group1'的卷组，使用/dev/sdb1, /dev/sdb2 和 /dev/sdb3创建。

# vgcreate volume-group1 /dev/sdb1 /dev/sdb2 /dev/sdb3

使用下列命令可以来验证卷组。

# vgdisplay 



  --- Volume group ---
  VG Name               volume-group1
  System ID
  Format                lvm2
  Metadata Areas        3
  Metadata Sequence No  1
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                0
  Open LV               0
  Max PV                0
  Cur PV                3
  Act PV                3
  VG Size               3.02 GiB
  PE Size               4.00 MiB
  Total PE              774
  Alloc PE / Size       0 / 0
  Free  PE / Size       774 / 3.02 GiB
  VG UUID               bwd2pS-fkAz-lGVZ-qc7C-TaKv-fFUC-IzGNBK

从输出中，我们可以看见卷组的使用量/总量。物理卷给卷组提供空间。只要在这个卷组中还有可用空间，我们就可以随意创建逻辑卷。

使用下列命令删除卷组。

# vgremove volume-group1
  • 创建逻辑卷

下列命令创建一个名为'1v1'、大小为100MB的逻辑卷。我们使用小分区减少执行时间。这个逻辑卷使用之前创建的卷组的空间。

# lvcreate -L 100M -n lv1 volume-group1

逻辑卷可使用lvdisplay命令查看。

# lvdisplay 


  --- Logical volume ---
  LV Name                /dev/volume-group1/lv1
  VG Name                volume-group1
  LV UUID                YNQ1aa-QVt1-hEj6-ArJX-I1Q4-y1h1-OFEtlW
  LV Write Access        read/write
  LV Status              available
  # open                 0
  LV Size                100.00 MiB
  Current LE             25
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:2

 现在逻辑卷已经准备好了，我们可以格式化和挂载逻辑卷，就像其它ext2/3/4分区一样！

# mkfs.ext4 /dev/volume-group1/lv1
# mkdir /lvm-mount
# mount /dev/volume-group1/lv1 /lvm-mount/

一旦逻辑卷挂载，我们就可以到挂载点 /lvm-mount/ 上读写了。要创建和挂载其它的逻辑卷，我们重复这个过程。

最后，使用lvremove我们可以删除逻辑卷。

# umount /lvm-mount/
# lvremove /dev/volume-group1/lv1
  • 扩展一个LVM卷 

调整逻辑卷大小的功能是LVM最有用的功能。这个部分会讨论我们怎么样扩展一个存在的逻辑卷。下面，我们将会扩展先前创建的逻辑卷‘lv1’扩大到200MB。

注意，调整逻辑卷大小之后，也需要对文件系统调整大小进行匹配。这个额外的步骤各不相同，取决于创建文件系统的类型。在本文中，我们使用'lv1'创建了ext4类型的文件系统，所以这里的操作是针对ext4文件系统的。（ext2/3文件系统也类同）。命令的执行顺序是很重要的。

首先，我们卸载掉lv1卷

 umount /lvm-mount/

然后，设置卷的大小为200M

# lvresize -L 200M /dev/volume-group1/lv1

 接下来，检查磁盘错误

# e2fsck -f /dev/volume-group1/lv1

运行以下命令扩展文件系统以后，ext4信息就更新了。

# resize2fs /dev/volume-group1/lv1

 现在，这个逻辑卷应该已经扩展到200MB了。我们检查LV的状态来验证。

# lvdisplay 

  --- Logical volume ---
  LV Name                /dev/volume-group1/lv1
  VG Name                volume-group1
  LV UUID                9RtmMY-0RIZ-Dq40-ySjU-vmrj-f1es-7rXBwa
  LV Write Access        read/write
  LV Status              available
  # open                 0
  LV Size                200.00 MiB
  Current LE             50
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:2
  • 缩减一个LVM卷 

这章节介绍缩减LVM卷大小的方法。命令的顺序同样重要。并且，下列命令对ext2/3/4文件系统同样有效。

注意减少逻辑卷的大小值若小于储存的数据大小，存储在后面的数据会丢失。

首先，卸载掉卷。

# umount /dev/volume-group1/lv1

然后，检测磁盘错误。

# e2fsck -f /dev/volume-group1/lv1

 接下来缩小文件系统，更新ext4信息。

# resize2fs /dev/volume-group1/lv1 100M

 完成以后，减少逻辑卷大小

# lvresize -L 100M /dev/volume-group1/lv1

最后，验证调整后的逻辑卷大小。

# lvdisplay 


--- Logical volume ---
  LV Name                /dev/volume-group1/lv1
  VG Name                volume-group1
  LV UUID                9RtmMY-0RIZ-Dq40-ySjU-vmrj-f1es-7rXBwa
  LV Write Access        read/write
  LV Status              available
  # open                 0
  LV Size                100.00 MiB
  Current LE             25
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:2

 

  • 扩展一个卷组

本节将讨论扩展卷组的方法，将一个物理卷添加到卷组。让我们假设我们的卷组'volume-group1'已经满了，需要扩大。手上的硬盘（sdb）已经没有其他空闲分区，我们添加了另外一个硬盘（sdc）。我们将看到如何把sdc的分区添加到卷组以扩展。

检测现在卷组状态

# vgdisplay volume-group1 

 --- Volume group ---
  VG Name               volume-group1
  System ID
  Format                lvm2
  Metadata Areas        3
  Metadata Sequence No  8
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                1
  Open LV               0
  Max PV                0
  Cur PV                3
  Act PV                3
  VG Size               3.02 GiB
  PE Size               4.00 MiB
  Total PE              774
  Alloc PE / Size       25 / 100.00 MiB
  Free  PE / Size       749 / 2.93 GiB
  VG UUID               bwd2pS-fkAz-lGVZ-qc7C-TaKv-fFUC-IzGNBK

首先，我们创建一个2GB分区sdc1，类型为LVM（8e），如教程前所述。

# fdisk /dev/sdc 

Command (m for help): n
Command action
   e   extended
   p   primary partition (1-4)
p
Partition number (1-4): 1
First cylinder (1-1044, default 1):
Using default value 1
Last cylinder, +cylinders or +size{K,M,G} (1-1044, default 1044): +2G
 
Command (m for help): t
Selected partition 1
Hex code (type L to list codes): 8e
Changed system type of partition 1 to 8e (Linux LVM)
 
Command (m for help): w
The partition table has been altered!

然后，我们创建一个物理卷 /dev/sdc1

# pvcreate /dev/sdc1

现在，物理卷已经准备好了，我们可以简单地将它增加到已存在的卷组'volume-group1'上。

# vgextend volume-group1 /dev/sdc1

使用vgdisplay来验证（可以看到卷组大小已经增大）。

# vgdisplay 

  --- Volume group ---
  VG Name               volume-group1
  System ID
  Format                lvm2
  Metadata Areas        4
  Metadata Sequence No  9
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                1
  Open LV               0
  Max PV                0
  Cur PV                4
  Act PV                4
  VG Size               5.03 GiB
  PE Size               4.00 MiB
  Total PE              1287
  Alloc PE / Size       25 / 100.00 MiB
  Free  PE / Size       1262 / 4.93 GiB
  VG UUID               bwd2pS-fkAz-lGVZ-qc7C-TaKv-fFUC-IzGNBK

注意，尽管我们使用一个单独的磁盘做示范，其实只要是‘8e’类型的磁盘分区都可以用来扩展卷组。

总结一下，LVM是一个非常给力的工具，用来创建和管理可变大小的分区。本文中，我们已经介绍了动态分区如何在LVM中创建和使用。我们也介绍了扩展/缩小逻辑卷和卷组的方法，和如何增加一个新的磁盘到LVM。

 

 

二、LVM在ceph-volume中的机制

白白白头
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
浅学RC充放电电路
06-24
浅学RC充放电电路
基于LVM的Ceph部署方案
d1z878的专栏
01-22 1522
使用lvm-cache的方案部署ceph
ceph-volume lvm 如何修改 db devices
最新发布
隔壁老瓦的专栏
02-19 516
5. 执行 `ceph-volume lvm create --bluestore --data --block.db ` 命令来创建一个新的 `db` 设备。在命令中将 `` 替换为要使用的数据设备的路径，将 `` 替换为要用作 `db` 设备的路径。确保备份关键数据以防万一。6. 运行 `ceph-volume lvm list` 命令，确保新的 `db` 设备已正确添加，并且状态为正常。
xml浅学笔记
05-15
1、XML AJAX: Asynchronous Javascript And Xml 1、什么是XML eXtensible Markup Language 可扩展的 标记 语言 XML的标记没有预定义过，需要自行定义 XML的宗旨是做数据传递的，而非数据显示 2、XML的语法规范 XML可以保存成独立的 ***.xml 的文件，也可以以字符串的形式出现（服务器端生产） 1、XML的最顶端是XML的声明 <?xml version="1.0" encoding="utf-8" ?> 2、XML标记的语法 1、XML标记必须成对出现 2、xml标记是严格区分大小写，开始和结束必须一致 3、XML的标记也允许被嵌套，注意嵌套顺序 4、每个标记都允许自定义属性，格式与HTML一致，但属性值，必须用""括起来 5、每个XML文档中必须要有一个跟元素 3、使用AJAX 请求 XML 文档 1、要遵循AJAX的请求步骤 1、创建/获取 xhr 2、创建请求 xhr.open("get","***.xml",true); 3、设置回调函数 xhr.onreadystatechange=function(){ if(xhr.readyState==4&&xhr;.status==200){ } } 4、发送请求 xhr.send(); 2、在回调函数中，处理响应数据 使用 xhr.responseXML 来获取响应数据，返回的是XML文档对象 4、解析XML文档对象的内容 1、核心方法 elem.getElementsByTagName("标签的名字"); elem：表示的是获取范围的对象 返回值：返回一个包含指定元素们的类数组 5、在php中返回xml格式的字符串 1、必须增加响应消息头 header("Content-Tupe:application/xml"); 2、按照xml的语法结构，拼xml字符串，再响应给客户端 $xml="<?xml version='1.0' encoding='utf-8'?>"; $xml.="<...>"; ....
浅学电子幸运大转盘知识
06-25
浅学电子幸运大转盘知识
Ceph工作原理详解
lv0918_qian的博客
07-14 292
一、Ceph概述 这里简单的说一下相关的组件，只是简单介绍 组件 概念 Monitor 一个Ceph集群需要多个Monitor组成的小集群，它们通过Paxos同步数据，用来保存OSD的元数据 OSD OSD负责相应客户端请求返回具体数据的进程，一个Ceph集群一般都有很多个OSD MSD MSD 全称Cepg Metadata Service，是CephFs服务依赖的元数据服务 Object Ceph最底层的存储单位是Object对象，每个Object包含元
Linux中lvm和ceph区别,Ceph概念介绍及组件介绍
weixin_33315608的博客
05-13 1020
一：Ceph基础介绍Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统，根据场景划分可以将Ceph分为三大块，分别是对象存储、块设备存储和文件系统服务。Ceph相比其它存储的优势点在于它不单单是存储，同时还充分利用了存储节点上的计算能力，在存储每一个数据时，都会通过计算得出该数据存储的位置，尽量将数据分布均衡，同时由于Ceph的良好设计，采用了CRUSH算法、HASH环等方法，使得它不存在...
Linux中lvm和ceph区别,请教一下CephFS、RBD、RGW各自的适用场景和优缺点？
weixin_42299346的博客
05-13 1155
三种存储类型-块存储典型设备：磁盘阵列，硬盘主要是将裸磁盘空间映射给主机使用的。优点：• 通过Raid与LVM等手段，对数据提供了保护。• 多块廉价的硬盘组合起来，提高容量。• 多块磁盘组合出来的逻辑盘，提升读写效率。缺点：• 采用SAN架构组网时，光纤交换机，造价成本高。• 主机之间无法共享数据。使用场景：• docker容器、虚拟机磁盘存储分配。• 日志存储。• ...
【ceph】ceph集群的节点机器重启，导致磁盘的lvm消失，如何恢复呢～～满满的都是干货
zerotoall的博客
10-24 355
【ceph】ceph集群的节点机器重启，导致磁盘的lvm消失，如何恢复呢～～满满的都是干货
ecph部署mysql_废物利用:私有云搭建从ceph到LVM
weixin_42552637的博客
02-23 370
家里有4块笔记本废硬盘，分别是250G,300G,500G,1T，其中250G的硬盘和300G的硬盘有坏块，这个是一个坑，导致后期实验浪费好多时间。慎重提醒，使用旧硬盘前一定要用badblocks -v /dev/sd*检查一下硬盘的坏块。一. ceph存储部署与使用1、Docker环境下部署ceph存储集群2、ceph存储的使用(1)在客户端主机上部署ceph客户端在主机上安装ceph-comm...
当LVM遇到RookCeph
Java小虎
12-18 657
Preface 由于近期Ceph集群经常出现各种OSD的问题，每次都需要人工手动来解决，故简单分享一下RookCeph是如何利用LVM来构建的OSD存储，OSD存储又能为我们做什么。 Why Use It? Ceph OSD Daemon 多副本同步机制，保障高可用、一致性。 ceph集群一般包含多个OSD，一旦发生磁盘故障时，Ceph OSD Daemon会智能的协同其他OSD对损坏的磁盘上的OSD进行恢复操作，与此同时，其内部会重新选主。 OSD 扩展灵活、去中心化 相对传统HDFS，摒弃掉了元
深度学习数据+配合博文“在git上面看到的代码，浅学了一下”
04-10
1. 这个是git上朋友发的，我这就是蹭蹭人家流量了 2. 是一个时序预测的问题的数据集 3. 每个小时一个数据，每个batch训练的数据是前一周也就是196个小时，预测的结果是下一天的数据24小时
浅学二极管与三极管
06-24
二极管，三极管，PN接
ceph运维
weixin_43757555的博客
07-08 847
osd的扩容和换盘 横向扩容（扩容节点） 扩展mds： 需要将扩容的节点上安装ceph所需要的包，然后将节点加入到集群中，在新节点安装ceph,ceph版本必须与原集群版本一致 yum -y install ceph rpm -qa | egrep -i “ceph|rados|rbd” ceph -v 管理节点复制配置文件和密钥到新增节点 [root@node143 ceph]# ls ceph.client.admin.keyring ceph.conf [root@ceph1 ceph]#ce
Ceph学习 -- （3）Ceph接口与存储引擎
weixin_47252600的博客
01-17 883
高层应用接口详解、存储引擎介绍
@ceph分布式存储应用接口（mds及rbd）
ଲ一笑奈@何
05-19 443
文章目录高层应用接口详解1）什么是块设备2）块设备的使用3）Ceph块设备接口的使用4）总结（块设备）二、文件存储接口1）Ceph的文件系统接口2）文件系统接口与块设备接口的区别3）Ceph的文件系统接口的使用三、对象存储接口1) 对象存储接口的使用2)块设备接口存储和文件系统接口存储与（对象存储）区别3）Ceph的对象存储接口的使用4）总结四、块存储接口rbd的写入1)块存储接口rbd的写入过程2）储备知识:常见的write cache种类3）RBD块存储缓存4）Cache tiering (缓存分层
ceph-volume源码分析(一)
不要害怕_Cullen
01-02 1043
ceph-volume源码分析(一) 在接触ceph的过程中，用到了ceph-volume这个部署OSD的社区工具，就想着利用闲暇时间看下源码实现，一方面自己很久没有写过东西了，利用看源码的过程熟悉下python语言，同时学习下社区大佬的编程思路和风格。 废话不多说，先上官方介绍文档地址：[官方链接地址](https://docs.ceph.com/en/latest/man/8/ceph-volume/) 通过官方介绍文档我们可以看到ceph-volume是社区用来替代ceph-disk
ceph-volume源码分析(四)
不要害怕_Cullen
01-08 477
上一篇文章讲到self.mian最后调用terminal.dispatch(self.mapper, subcommand_args)，我们先看下该函数实现： def dispatch(mapper, argv=None): argv = argv or sys.argv for count, arg in enumerate(argv, 1): if arg in mapper.keys(): instance = mapper.get(arg)(a
静态方法中使用jdbctemplate_JdbcTemplate浅学
06-13
可以在静态方法中使用JdbcTemplate，只需在方法中创建JdbcTemplate对象即可。以下是一个简单的示例： ```java import org.springframework.jdbc.core.JdbcTemplate; import org.springframework.jdbc.datasource.DriverManagerDataSource; public class MyDao { private static JdbcTemplate jdbcTemplate; static { DriverManagerDataSource dataSource = new DriverManagerDataSource(); dataSource.setDriverClassName("com.mysql.jdbc.Driver"); dataSource.setUrl("jdbc:mysql://localhost:3306/mydb"); dataSource.setUsername("username"); dataSource.setPassword("password"); jdbcTemplate = new JdbcTemplate(dataSource); } public static void myStaticMethod() { String sql = "SELECT COUNT(*) FROM mytable"; int count = jdbcTemplate.queryForObject(sql, Integer.class); System.out.println("Count: " + count); } } ``` 在上面的示例中，我们首先在静态块中创建了一个JdbcTemplate实例，然后在静态方法中使用该实例执行SQL查询。需要注意的是，我们在静态方法中不能直接访问非静态的实例变量或方法。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

白白白头

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值