mfs——mfs的部署

mfs工作原理

分布式原理
分布式文件系统就是把一些分散在多台计算机上的共享文件夹，集合到一个共享文件夹内，用户要访问这些文件夹的时候，只要打开一个文件夹，就可以的看到所有链接到此文件夹内的共享文件夹。
.
MFS原理

MFS是一个具有容错性的网络分布式文件系统，它把数据分散存放在多个物理服务器上，而呈现给用户的则是一个统一的资源。

1）MFS的组成
元数据服务器（Master）：在整个体系中负责管理文件系统，维护元数据，目前不支持高可用。
元数据日志服务器（MetaLogger）：备份Master服务器的变化日志文件，当master服务器损坏，可以从日志服务器中取得文件恢复。
数据存储服务器（Chunk Server）：真正存储数据的服务器，服务器越多，容量就越大，可靠性越高，性能越好。
客户端（Client）： 可以像挂载NFS一样 挂载MFS文件系统
2）MFS读数据的处理过程
客户端向元数据服务器发出读请求
元数据服务器把所需数据存放的位置（Chunk Server的IP地址和Chunk编号）告知客户端
客户端向已知的Chunk Server请求发送数据
Chunk Server向客户端发送数据
3）写入的过程
客户端向元数据服务器发送写入请求
元数据服务器与Chunk Server进行交互，但元数据服务器只在某些服务器创建新的分块Chunks，创建成功后由hunk Servers告知元数据服务器操作成功
元数据服务器告知客户端，可以在哪个Chunk Server的哪些Chunks写入数据
客户端向指定的Chunk Server写入数据
该Chunk Server与其他Chunk Server进行数据同步，同步成功后Chunk Server告知客户端数据写入成功
客户端告知元数据服务器本次写入完毕

部署mfs

• server1上安装mfsmaster，mfscgi（web监控）

[root@server1 mfs]# yum install -y moosefs-cgi-3.0.103-1.rhsystemd.x86_64.rpm moosefs-cgiserv-3.0.103-1.rhsystemd.x86_64.rpm moosefs-master-3.0.103-1.rhsystemd.x86_64.rpm
[root@server1 mfs]# vim /etc/hosts
172.25.8.1 server1 mfsmaster

• 开启master可以看9419，9420，9421端口开启
• 9419 metalogger 监听的端口地址(默认是9419)，和源数据日志结合。定期和master端同步数据
  9420 用于chunkserver 连接的端口地址（默认是9420），通信节点
  9421 用于客户端对外连接的端口地址（默认是9421）

• 打开cgi可以看到9425端口开启
  
• 访问本机的9425端口
  
• server2安装mfs-chunkserver 这是存储端，解析一定要写

[root@server2 mfs]# rpm -ivh moosefs-chunkserver-3.0.103-1.rhsystemd.x86_64.rpm
[root@server3 mfs]# rpm -ivh moosefs-chunkserver-3.0.103-1.rhsystemd.x86_64.rpm
[root@server3 ~]# vim /etc/hosts
172.25.8.1 server1 mfsmaster
[root@server4 ~]# vim /etc/hosts
172.25.8.1 server1 mfsmaster

• 编辑客户端的配置文件

[root@server2 ~]# vim /etc/mfs/mfshdd.cfg
/mnt/chunk1
[root@server3 ~]# vim /etc/mfs/mfshdd.cfg
/mnt/chunk2

• 建立该目录,修改该挂载目录的所有人和所有组，这样才可以在目录中进行读写操作

[root@server2 mfs]# mkdir /mnt/chunk1
[root@server2 mfs]# chown mfs.mfs /mnt/chunk1/
[root@server3 mfs]# mkdir /mnt/chunk2
[root@server3 mfs]# chown mfs.mfs /mnt/chunk2/

[root@server2 mfs]# systemctl start moosefs-chunkserver 
[root@server3 mfs]# systemctl start moosefs-chunkserver 

• 真机安装mfs客户端并编辑配置文件

[root@localhost mfs]# yum install -y moosefs-client-3.0.103-1.rhsystemd.x86_64.rpm
[root@localhost ~]# vim /etc/hosts
172.25.8.1 server1 mfsmaster
[root@localhost ~]# mkdir /mnt/mfs
[root@localhost ~]# vim /etc/mfs/mfsmount.cfg
/mnt/mfs

• 在挂载的目录下新建两个目录,并查看数据存储服务器
  
• 挂载后可以看到