GFS分布式文件系统

客户端或应用程序通过GlusterFS的挂载点访问数据
linux系统内核通过VFS API收到请求并处理
VFS将数据递交给FUSE内核文件系统，fuse文件系统则是将数据通过/dev/fuse设备文件递交给了GlusterFS client端
GlusterFS client收到数据后,client根据配置文件的配置对数据进行处理
通过网络将数据传递至远端的GlusterFS Server,并且将数据写入到服务器存储设备上

2、弹性HASH算法

通过HASH算法得到一个32位的整数
划分为N个连续的子空间，每个空间对应一个Brick
弹性HASH算法的优点
保证数据平均分布在每一个Brick中
解决了对元数据服务器的依赖，进而解决了单点故障以及访问瓶颈

三、GlusterFS卷类型

1、分类

分布式卷
条带卷
复制卷
分布式条带卷
分布式复制卷
条带复制卷
分布式条带复制卷

2、类型介绍

2.1 分布式卷

没有对文件进行分块处理
通过扩展文件属性保存hash值
支持底层的文件系统有EXT2、EXT4、ZFS、XFS等
没有分块处理，文件只能存在于以个server中，效率不提升

分布式卷的特点：

文件分布在不同的服务器,不具备冗余性
更容易和廉价地扩展卷的大小
单点故障会造成数据丢失
依赖底层的数据保护

创建分布式卷命令：

gluster volum create fb-volum server1:/dir1 server2:/dir2 server3:/dir3 force 
#创建一个名为fb-volum的分布式卷，存储的文件将根据hash算法分布在server1、2、3：/dir1、2、3上。server1：/dir1是主机名：/挂载点

2.2 条带卷

根据偏移量将文件分成N块（N个条带点），轮询的存储在每个brick server节点
存储大文件时，性能尤为突出
不具备冗余性，类似于raid0
从多个server中同时读取文件，效率提升

条带卷的特点：

数据被分割成更小块分布到块服务器群中的不同条带区
分布减少了负载且更小的文件加速了存取的速度
没有数据冗余

创建条带卷命令：

gluster volum create td-volum stricpe 2 transport tcp server1:/dir1 server2:/dir2 force
#创建一个名为td-volume的条带卷，文件将被分块轮询存储在server1:/dir1 server2:/dir2 两个brick中

2.3 复制卷

同一文件保存一份或多份副本（类似raid1）
因为要保存副本，所以磁盘利用率较低
若多个节点上的存储空间不一致，将按照最低容量节点的容量作为该卷的总容量

复制卷的特点：

卷中所有的服务器均保存一个完整的副本
卷的副本数量可由客户创建的时候决定
至少由两个块服务器或更多服务器
具备冗余性

创建复制卷命令：

gluster volum create fz-volum replica 2 transport tcp server1:/dir1 server2:/dir2  
#创建名为fz-volum的复制卷，文件将同时存储两个副本，分别在server1:/dir1 server2:/dir2 两个brick中

2.4 分布式条带卷

兼顾分布式卷和条带卷的功能（先条带后分布）
主要用于大文件访问处理
至少需要4台服务器

创建分布式条带卷的命令：


gluster volum create ft-volum stripe 2 transport tcp server1:/dir1 server2:/dir2 server3:/dir3 server4:/dir4 
#创建名为ft-volum的分布式条带卷，配置分布式条带卷时，卷重brick所包含的存储服务器数量必须是条代卷数的倍数（两倍以上）

2.5 分布式复制卷

兼顾分布式卷和复制卷的功能
用于需要冗余的情况

创建分布式复制卷：


gluster volume create ff-volum replica 2 transport tcp server1:/dir1 server2:/dir2 server3:/dir3 server4:/dir4 
#创建名为ff-volum的分布式条带卷，配置分布式复制卷时，卷重brick所包含的存储服务器数量必须是条带卷数的倍数（两倍以上）

3、汇总

分布式：存储brick不在一个区域范围，某一个区域内brick坏了，不影响另一个区域的brick。
条带式：多个brick形成一个整体，这个整体内的任意一块brick坏了，整个条带卷不可用。
复制卷：多个brick形成一个整体，这个整体内的每块brick都有完整的副本，由此，复制卷内任意一块brick坏了，不影响复制卷使用。

四、GlusterFS部署

1、环境

准备5台主机，分别位4台服务器和一台客户端

IP地址为：20.0.0.21，主机名为：node1，添加4块磁盘，均为20G大小

IP地址为：20.0.0.22，主机名为：node2，添加4块磁盘，均为20G大小

IP地址为：20.0.0.23，主机名为：node3，添加4块磁盘，均为20G大小

IP地址为：20.0.0.24，主机名为：node4，添加4块磁盘，均为20G大小

IP地址为：20.0.0.25，主机名为：client，当做测试机使用

关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0

2、开局配置

最低0.47元/天解锁文章

HB199753

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
GFS分布式文件系统

目录前言一、GlusterFS概述1、简介2、特点3、常用术语4、模块化堆栈式架构5、组件二、工作原理1、流程2、弹性HASH算法三、GlusterFS卷类型1、分类2、类型介绍2.1分布式卷2.2 条带卷2.3 复制卷2.4 分布式条带卷2.5 分布式复制卷3、汇总四、GlusterFS部署1、环境2、开局配置2.1所有的节点node都操作下面这些步骤，这里以node1：20.0.0.21为列...
复制链接

扫一扫