Glusterfs 卷及常用命令总结

已于 2023-12-24 23:36:51 修改
阅读量1.3k 收藏 16
点赞数 18
文章标签： 分布式 linux 服务器 hdfs hive centos
于 2023-12-14 22:33:10 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ONEJ017/article/details/134796766
版权

Glusterfs 卷及常用命令总结

一、概述

开源的分布式文件系统

传统的分布式文件系统–> 有中心架构（元数据服务器），元数据服务器出现故障，整个存储系统崩溃

Glusterfs分布式文件系统–> 无中心架构（无元数据服务器），数据横向扩展能力强，具备较高的可靠性及存储效率。

1.1特点

Glusterfs采用集群式NAS存储系统：
传统的NAS系统–>独立的存储设备来提供文件共享服务，客户端通过网络连接到该存储设备来访问文件
Glusterfs–>每个存储服务器都可以安装 GlusterFS，并作为一个 Brick 加入到 GlusterFS 集群中,这些存储服务器之间通过网络互联，形成一个分布式的存储系统。通过将数据在不同的存储节点之间进行分布和复制，实现数据的冗余和负载均衡。
基于标准协议
客户端可以通过各种支持的文件访问协议（如NFS、CIFS、原生 GlusterFS 协议等）连接到 GlusterFS 集群，并像访问本地文件系统一样访问和操作文件
全局统一命名空间
通过将所有存储节点中的文件和目录合并成一个单一的文件系统视图，为客户端提供了一种透明的访问方式。在全局命名空间下，客户端可以像访问本地文件系统一样访问存储集群中的文件和目录，而不必关心它们实际上存储在哪个存储节点上。
弹性卷管理，高可用
根据业务需求实时地调整存储容量和性能，从而更好地满足不同的应用场景和工作负载，当存储节点发生故障时，数据可以自动转移到其他节点上，避免数据丢失。

1.2 术语解释

brick：存储节点上的数据单元，GlusterFS 存储卷的基本组成部分。
Volume：由一个或多个存储节点上的 brick 组成，提供了一个统一的命名空间，使客户端可以通过挂载 Volume 来访问其中的文件和目录。支持多种类型的 Volume，包括分布式卷、复制卷、条带化卷等
Replica：副本是存储卷中数据的复制品。GlusterFS 支持在不同的存储节点上创建文件的副本，以提供数据冗余和高可用性。
Stripe：条带是将文件数据分成固定大小块并分布在多个存储节点上的方式。条带化可以提高读写性能。
Vfs: 内核空间对用户空间提供的访问磁盘的接口

二、volume总结

创建卷

gluster volume create … server1:/dir1 server2:/dir2 server3:/dir3 server4:/dir4

GlusterFS 创建卷（Volume）时，需要确保所有参与卷的存储节点已经加入到同一个 GlusterFS 存储集群中,创建卷之前，需要先创建 GlusterFS 存储集群，并将各个存储节点添加到集群中

2.1 分布式卷

GlusterFS的默认卷；以文件为单位根据HASH算法散列到不同的Brick，其实只是扩大了磁盘空间，如果有一块磁盘损坏，数据也将丢失

**加粗文本** __加粗文本__
Volume Name: vol_re1 - 卷的名称。
Type: Distribute - 卷的类型， “Distribute”，表示该卷采用分布式模式。
Volume ID: 2699c0c8-4ac0-4bd8-94c2-e2c5e37f2eeb - 卷的唯一标识符，用于在 GlusterFS 中标识该卷。
Status: Created - 卷的状态
Snapshot Count: 0 - 快照的数量
Number of Bricks: 2 - 卷包含的存储节点数量
Transport-type: tcp - 传输类型，本例中为 “tcp”，表示使用 TCP/IP 进行通信。
Bricks: 存储节点和相应目录的列表。
Brick1: node1:/sdc - 存储节点1的名称和目录路径，本例中为 “node1:/sdc”。
Brick2: node2:/sdc - 存储节点2的名称和目录路径，本例中为 “node2:/sdc”。
Options Reconfigured: 已重新配置的选项列表。
storage.fips-mode-rchecksum: on - 已重新配置的选项，本例中为 “storage.fips-mode-rchecksum”，表示该选项已设置为 “on”。
transport.address-family: inet - 已重新配置的选项
nfs.disable: on - 已重新配置的选项 已设置为 “on”。

2.2 复制（副本）卷

文件同步到多个Brick上，使其具备多个文件副本 复制卷具备冗余性，即使一个节点损坏，也不影响数据的正常使用。
在这里插入图片描述

2.3 分布式复制（分布式副本）卷

文件同步到多个Brick上，使其具备多个文件副本，复制卷具备冗余性，即使一个节点损坏，也不影响数据的正常使用。但因为要保存副本，所以磁盘利用率较低。
在这里插入图片描述
Number of Bricks: 3x2=6
数字 “3” 是分布因子（Distribute Factor），指有副本数为3
字母 “x” 表示乘号，将分布因子和复制因子分隔开。
数字 “2” 是复制因子（Replica Factor），表示每个数据块被复制到两个不同的存储节点上。

2.4 分散卷（纠删卷）

文件编码条带化后分散存储在卷的多个块中，提高磁盘利用率
分散卷的冗余值表示允许多少块失效而不中断对卷的读写操作
冗余值（redundancy）必须大于0，总块数大于2倍的冗余值---->分散卷至少3个块组成
可用存储空间计算公式：
=*(bricks-Redundancy)

创建命令：

#gluster volume create volume_name [disperse[<count>]] [disperse-data<count>] [redundancy<count>] [tcp|rdma] [new_brick]

在这里插入图片描述
Disperse:纠删码的数据块数量
disperse-data：实际纠删码数量
Redundancy：冗余数据块数量

2.5分布式分散卷（分布式纠删卷）

与分布式复制卷的区别在于分布式分散卷通过分散卷将数据存储在数据块中

#gluster volume create volume_name [disperse[<count>]] [disperse-data<count>] [redundancy<count>] [tcp|rdma] [new_brick]

在这里插入图片描述
数字 “2” 表示卷的副本数（Replica Count），也就是每个数据片段在集群中的复制份数。
数字 “2 + 1” 表示卷的分散编码配置。其中，数字 “2” 表示数据片段的数量，而数字 “1” 表示冗余数据片段的数量。

2.6 分层卷

在存储设备之间创建多个层级，并使用这些层级来管理数据
层级管理，包括热数据的快速访问和冷数据的低成本存储
在这里插入图片描述
热层：node1:/sdf node2:/sdf
冷层：node2:/sdg node2:/sdg

三、volume其他操作

停止卷： gluster volume stop <VOLNAME>
在这里插入图片描述

启动卷：gluster volume start <VOLNAME>
在这里插入图片描述

删除卷：gluster volume delete <VOLNAME>
在这里插入图片描述
查看所有卷：gluster volume list
在这里插入图片描述
查看单个卷状态：gluster volume info <VOLNAME>
在这里插入图片描述

扩展卷：
gluster volume add-brick <VOLNAME> replica <N> <HOSTN>:<BRICKN>

移除卷上的brick：gluster volume remove-brick <VOLNAME> start <HOST>:<BRICK>

四、gluster常用命令

4.1 peer help

显示有关对等节点命令的帮助信息。

gluster peer detach { <主机名> | <IP地址> } [force]

此命令用于断开指定主机名或IP地址的对等节点的连接。如果提供了可选的 force 关键字，则会强制断开连接。
#peer detach peer1 force

gluster peer probe { <主机名> | <IP地址> }

此命令用于探测或连接到指定主机名或IP地址的对等节点。它建立与指定对等节点的连接，以启用通信和数据交换。
#peer probe peer2

glsuter peer status

运行此命令将列出所有已连接对等节点的状态信息
在这里插入图片描述
Uuid:节点唯一标识符

gluster pool list

列出池中的所有节点

4.2 volume help

显示有关卷命令的帮助信息。–>见二、volume总结

4.3 volume quota help

显示有关卷配额命令的帮助信息。

gluster volume quota\ enable

启用或禁用指定卷的配额功能
在这里插入图片描述

gluster volume inode-quota <VOLNAME> enable

启用或禁用指定卷的inode配额
Quota是指对文件系统中的存储空间设置限制。
inode quota 文件和目录的数量

#gluster volume quota vol-re2 alert-time 60在这里插入图片描述

gluster volume quota <VOLNAME> limit-usage <path> <size>

设置指定卷路径中允许的最大条目数。
#gluster volume quota vol-re2 limit-objects /cifs1-1 100
在这里插入图片描述

gluster volume quota vol-re2 list

查看卷配额信息
#gluster volume quota vol-re2 list
在这里插入图片描述

4.4 volume tier help

gluster volume tier <VOLNAME> attach [<replica COUNT>] <NEW-BRICK>… [force]
将热层附加到指定的 <VOLNAME> 卷上,<replica COUNT> 来设置热层的副本数<NEW-BRICK> 参数来指定要添加到热层的新存储单元（brick）

#gluster volume tier vol-re2-02 attach replica 2 node1:/sdf node2:/sdf force
在这里插入图片描述

glsuter volume tier <VOLNAME> detach <start|stop|status|commit|[force]> - 从指定的 <VOLNAME> 卷中分离热层

执行分离热层之前，可能需要确认数据已经按照预期转移到冷层，以避免数据丢失，因为分离热层将从热层中删除所有数据。

使用 start 参数，可以分离热层并启动相应的冷层服务。
在这里插入图片描述

使用 status 参数，可以获取关于热层分离的状态信息。
文件迁移操作完成后，存储卷将处于无分层状态
在这里插入图片描述

使用 stop 参数，可以分离热层并停止冷层服务。
在这里插入图片描述

使用 commit 参数，可以提交热层分离的更改。
在这里插入图片描述

4.6 snapshot help

创建快照 snapshot create <snapname> <volname> [no-timestamp] [description <description>] [force]

#gluster snapshot create my_snap1 vol-lvm01 no-timestamp
查看快照列表 gluster snapshot list [volname]
#gluster snapshot list vol-lvm01
在这里插入图片描述
查看快照状态：gluster snapshot status [(snapname | volume <volname>)]
#gluster snapshot status my_snap1
在这里插入图片描述
删除快照：gluster snapshot delete (all | snapname | volume <volname>)
停用指定名称的快照卷：gluster snapshot deactivate <snapname>
激活指定名称的快照卷： gluster snapshot activate <snapname> [force]

快照回滚：gluster snapshot restore <snapname>
例：激活快照，然后在文件系统touch 100个txt文件
在这里插入图片描述

停止文件系统，回滚gluster snapshot restore my_snap1
开启文件系统，查看结果
在这里插入图片描述

4.6 global help

detail - 显示更详细的信息
#gluster volume status vol-re1 detail
long - 以长格式显示信息
bricks - 显示有关存储服务器节点的信息
clients - 显示连接到卷组的客户端信息
#gluster volume status vol-re2 clients
启用或禁用 NFS-Ganesha :gluster nfs-ganesha {enable|disable}

ONE J
关注
  • 18
    点赞
  • 踩
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
gstatus:gstatus 是查看 glusterfs 集群当前健康状况的命令
05-30
状态 概述 gstatus 是一个命令行实用程序，用于报告与 GlusterFS 集群相关的运行状况和其他统计信息。 gstatus 整合了 GlusterFS 集群的卷、砖和对等信息。 在卷级别，gstatus 报告有关配额使用情况、快照、自我修复和重新平衡状态的详细信息。 动机 gluster 可信存储池（又名集群）由几个关键组件组成，即。 节点、卷和砖块。 在 glusterfs 中，没有一个命令可以提供集群健康状况的概览。 这意味着管理员目前通过查看几个命令来拼凑集群状态的图片来评估集群健康状况。 这并不理想 - 因此“gstatus”试图通过单个命令提供易于使用、可靠、高级别的集群运行状况视图。 该工具通过调用 glustercli 库 ( ) 收集信息并显示在屏幕上。 依赖关系 python 3.0 或以上 gluster 3.12 或以上版本 命令行界面 安装 使用命令
GlusterFS分布式文件系统的卷类型及配置详解.txt
08-08
centos7 Glusterds分布式存储安装配置以及其已经常用维护命
GlusterFS常用命令小结
热门推荐
崔炳华
10-12 1万+
GlusterFS常用命令小结     崔炳华 △启动/关闭glusterd服务 /etc/init.d/glusterd start /etc/init.d/glusterd stop   △开机自动启动glusterd服务 chkconfig glusterd on（Red Hat） update-rc.d glusterd defaults（Debian） echo "
GlusterFS 分布式文件系统 搭建及使用
最新发布
小毕超博客
04-14 1058
GlusterFS 是一个开源的分布式文件系统，旨在提供高性能、可扩展性和可靠性，适用于现代数据中心和云环境。它以横向扩展的方式设计，可以在多台服务器之间共享文件系统，为应用程序提供统一的文件存储服务。
Glusterfs 常用命令
不忘初心，方得始终
03-13 534
删除卷的前提是先停止卷，如果要删除卷下面的数据，现在客户端将卷下的数据删除完毕，再停止卷，再删除卷。GlusterFS 卷快照功能基于精简配置的 LVM 快照。Brick LVM 不应包含除Brick以外的任何其他数据。任何Brick都不应该放在厚重的 LVM 上。每个块都应位于独立的精简配置的 LVM 上。Gluster 版本应为 3.6 及以上。
GlusterFS常用命令集
SRE成长记
01-18 2406
GlusterFS常用命令总结
glusterfs常用命令
ruoxiyun的博客
02-11 2911
1.集群中加入主机(Ip 1.13.14.3) gluster peer probe 1.13.14.3 2.集群中移除主机(Ip 1.20.6.5) gluster peer detach 1.20.6.5 执行该命令的时候，You might fail with: peer detach: failed: Brick(s) with the peer 1.20.6.5 exist in c...
glusterfs 5.0
11-06
7. **创建卷和挂载**：使用`gluster volume create`命令创建卷，指定卷的大小、类型及砖的配置。然后，使用`gluster volume start`启动卷。最后，在需要访问GlusterFS的客户端上挂载这个卷。 8. **监控和维护**：...
GlusterFS学习笔记.docx
05-12
客户端可以使用 GlusterFS 提供的 API 或者使用 mount 命令来挂载 GlusterFS 卷。 6. GlusterFS 优点 GlusterFS 的优点包括： * 高性能：GlusterFS 可以提供高性能的存储解决方案，满足大规模数据存储和分析的...
GlusterFS-Lustre-MooseFS实践总结
01-29
这篇文章主要是自己在GlusterFS-Lustre-MooseFS系统实践过程中发现的一些问题以及操作的汇总。总结出对这个分布式系统的个人理解。 希望大家支持
glusterfs-client-ansible-role:挂载GlusterFS卷的角色
05-19
挂载GlusterFS卷的辅助角色。 要求 centos 7 ansible> = 2.2 安装 $ ansible-galaxy install zaxos.glusterfs-client-ansible-role 剧本范例 - hosts : servers vars : glusterfs_version : " 3.10 " ...
glusterfs常用命令及使用方法
chenliang1038的博客
12-02 1620
1、准备工作：四台主机，每台主机各需两块磁盘sda1（系统盘）、sdb（数据盘） 主机1：glusterfs01-17 10.1.1.17 主机2：glusterfs02-19 10.1.1.19 主机3：glusterfs03-13 10.1.1.13 主机4：glusterfs04-14 10.1.1.14 四台主机都安装glusterfs，具体步骤：参考----- 2、修改/...
Glusterfs的常用命令
C18701162190的博客
04-19 599
1 服务器节点 #gluster peer status //查看所有节点信息，显示时不包括本节点 #gluster peer probe NODE-NAME //添加节点 #gluster peer detach NODE-NAME //移除节点，需要提前将该节点上的brick移除 2 glusterd服务 /etc/init.d/glus...
glusterfs创建分布式卷
吴业亮的专栏
08-07 1770
作者：吴业亮 博客：http://blog.csdn.net/wylfengyujiancheng 一、环境信息 node1 192.168.8.11 两块磁盘 node2 192.168.8.12 两块磁盘 二、通用配置（各个节点） 1、修改主机名 hostnamectl set-hostname node1 2、修改hosts文件 # cat <<"EOF">/e...
Glusterfs常用运维命令
叱咤少帅的博客
09-06 404
Glusterfs常用运维命令
Gluster管理命令的总结与归纳
weixin_33997389的博客
11-02 128
1 环境hostname=Server0[1-4]2 Gluster控制台2.1 直接命令行方式#glusterpeerstatus2.2 交互命令行方式#gluster gluster>peerstatus3 配置信任存储池3.1 增加服务器到信任存储池In Server01glusterpeerprobeserver02 glusterpeer...
创建Glusterfs分布式RAID10卷
云计算?
11-24 165
Glusterfs3.2.4/5支持五种Volume，即Distribute卷、Stripe卷、Replica卷、Distribute stripe卷和Distribute replica卷，这五种卷可以满足不同应用对高性能、高可用的需求。 (1)distribute volume：分布式卷，文件通过hash算法分布到brick server上，这种卷是glusterfs的基础和最大特点； (...
glusterfs命令简介
weixin_33713707的博客
07-15 127
安装：yum install -y glusterfs{,-server,-fuse,-geo-replication}如不使用主从复制，可以不装glusterfs-geo-replication操作：gluster peer commandgluster peer statusgluster peer probe server //添加机器gluster peer det...
GlusterFS迁移卷
05-19
GlusterFS是一个分布式文件系统，可以将多个存储节点组合成一个集群，提供高可用性和可扩展性。如果需要迁移卷，可以按照以下步骤进行操作： 1. 确认新节点已经加入到 GlusterFS 集群中。 2. 在新节点上创建一个目录，用于挂载 GlusterFS 卷。 3. 在旧节点上卸载 GlusterFS 卷，使用以下命令： ``` umount /mnt/glusterfs ``` 4. 在新节点上挂载 GlusterFS 卷，使用以下命令： ``` mount -t glusterfs oldnode:/volname /mnt/glusterfs ``` 其中，oldnode 是旧节点的 IP 地址，volname 是要迁移的 GlusterFS 卷名称。 5. 确认新节点上的卷已经挂载成功，可以通过以下命令查看： ``` df -h ``` 如果看到 /mnt/glusterfs 目录下的文件系统，说明卷已经成功迁移。 6. 在新节点上设置卷的挂载选项，例如在 /etc/fstab 中添加以下行： ``` oldnode:/volname /mnt/glusterfs glusterfs defaults,_netdev 0 0 ``` 这样可以确保在系统启动时自动挂载 GlusterFS 卷。 7. 确认新节点上的卷可以正常访问和使用。 注意：在迁移卷之前，建议备份数据以避免数据丢失。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值