linux中的mfs文件系统

MFS

1.什么是MFS文件系统：

• MooseFS是一个具有容错性的网络分布式文件系统。它把数据分散存放在多个物理服务器上，而呈现给用户的则是一个统一的资源。

2.MooseFS文件系统结构包括一下四种角色：

• （1）管理服务器master
  管理服务器：负责各个数据存储服务的管理文件读写调度，文件空间回收以及恢复，多节点拷贝
• （2）元数据日志服务器：
  负责备份master服务器的变化日志文件，文件类型为changelog_ml.*.mfs，以便于在master server出现问题的时候解体器 进行工作
• （3）数据存储服务器data server（chunk servers）
  真正存储用户数据的服务器存储文件时，首先把文件分成块，然后这些块在数据服务器chunkserver之间赋值（复制份数可以手工指定，建议设置副本数为数据服务器可以为多个，并且数据越多，可使用的“磁盘空间越大，”可靠性也越高
• （4）客户端挂载使用client computers
  使用MFS文件系统来存储和访问的主机名称为MFS的客户端，成功挂载MFS系统以后，就可以像以前NFS一样共享这个虚拟性的存储了。

3.MFS特性：

   Free(GPL)
   通用文件系统，不需要修改上层应用就可以使用
   可以在线扩容，体系架构可伸缩性极强。
   部署简单。
   高可用，可设置任意的文件冗余程度
   可回收在指定时间内删除的文件
   提供netapp，emc，ibm等商业存储的snapshot特性
   google filesystem的一个c实现。
   提供web gui监控接口。
   提高随机读或写的效率
   提高海量小文件的读写效率

 MFS的读数据过程:
    client当需要一个数据时，首先向master server发起查询请求；
   管理服务器检索自己的数据，获取到数据所在的可用数据服务器位置ip|port|chunkid；
   管理服务器将数据服务器的地址发送给客户端；
   客户端向具体的数据服务器发起数据获取请求；
   数据服务器将数据发送给客户端；
 MFS的写数据过程：
   当客户端有数据写需求时，首先向管理服务器提供文件元数据信息请求存储地址（元数据信息如：文件名|大小|份数等）；
   管理服务器根据写文件的元数据信息，到数据服务器创建新的数据块；
   数据服务器返回创建成功的消息；
   管理服务器将数据服务器的地址返回给客户端(chunkIP|port|chunkid)；
   客户端向数据服务器写数据；
   数据服务器返回给客户端写成功的消息；
   客户端将此次写完成结束信号和一些信息发送到管理服务器来更新文件的长度和最后修改时间
MFS的删除文件过程：
   客户端有删除操作时，首先向Master发送删除信息；
   Master定位到相应元数据信息进行删除，并将chunk server上块的删除操作加入队列异步清理；
   响应客户端删除成功的信号
MFS修改文件内容的过程：
   客户端有修改文件内容时，首先向Master发送操作信息；
   Master申请新的块给.swp文件，
   客户端关闭文件后，会向Master发送关闭信息；
   Master会检测内容是否有更新，若有，则申请新的块存放更改后的文件，删除原有块和.swp文件块；
   若无，则直接删除.swp文件块。
MFS重命名文件的过程：
   客户端重命名文件时，会向Master发送操作信息；
   Master直接修改元数据信息中的文件名；返回重命名完成信息； 

MFS文件系统的配置：

配置主节点：

1.在server1安装master和web图形界面

  [root@server1 3.0.103]# yum install -y moosefs-cgi-3.0.103-1.rhsystemd.x86_64.rpm moosefs-cgiserv-3.0.103-1.rhsystemd.x86_64.rpm moosefs-master-3.0.103-1.rhsystemd.x86_64.rpm

2.做主节点解析

[root@server1 3.0.103]# vim /