1、mfs系统安装
官网详细安装说明:https://moosefs.com/download/
- Free(GPL)
- 通用文件系统,不需要修改上层应用就可以使用
- 可以在线扩容,体系架构可伸缩性极强。
- 部署简单。
- 高可用,可设置任意的文件冗余程度(
- 可回收在指定时间内删除的文件
- 提供netapp,emc,ibm等商业存储的snapshot特性。
- google filesystem的一个c实现。
- 提供web gui监控接口。
- 提高随机读或写的效率
- 提高海量小文件的读写效率
3、mfs文件系统结构
1)管理服务器managing server (master) :负责各个数据存储服务器的管理,文件读写调度,文件空间回收以及恢复.多节点拷贝。单个机器管理整个文件系统,用来存储记录每一个文件的Metadata(记录文件的大小、文件的属性、文件的位置,也包括非规则文件的系统,如目录、sockets、管道和设备)
2)元数据日志服务器Metalogger server(Metalogger):负责备份master服务器的变化日志文件,文件类型为changelog_ml.*.mfs,以便于在master server出问题的时候接替其进行工作。
3)数据存储服务器data servers (chunkservers):负责连接管理服务器,听从管理服务器调度,提供存储空间,并为客户提供数据传输。
4)数据存储服务器data servers (chunkservers) :负责连接管理服务器,听从管理服务器调度,提供存储空间,并为客户提供数据传输。
5)客户机client。
官网网络示意图如下:
数据读过程图如下:
数据写如下图:
debain安装moosefs:
1、 wget -O - http://ppa.moosefs.com/moosefs.key | apt-key add -
2、 echo "deb http://ppa.moosefs.com/moosefs-3/apt/debian/stretch stretch main" > /etc/apt/sources.list.d/moosefs.list
3、apt update
4、install
安装 Master Servers:
# apt install moosefs-master moosefs-cgi moosefs-cgiserv moosefs-cli
启动master
mfsmaster start
修改配置后:
mfsmaster reload
关闭:
mfsmaster stop
安装 Chunkservers:
# apt install moosefs-chunkserver
安装(可以不使用metaloggers) Metaloggers:
# apt install moosefs-metalogger
安装 Clients:
# apt install moosefs-client
mfsmaster服务配置:
1、使用apt安装的mfsmaster 编辑:/etc/mfs/ 目录下文件:mfsmaster.cfg 配置chunkserver地址及监听端口等,如下图:
mfsexports.cfg配置允许mount地址,及mount的chunserver的目录及读写权限等:
2、mfschunkserver 配置,在文件/etc/mfs/mfshdd.cfg配置文件中加入要挂载的文件目录
在mfschunkserver.cfg中配置mfsmaster的ip地址以及端口如下图:
mfs client端使用mfsmount命令挂载
mfsmount /opt/gzkgfiles/ -H 192.168.10.12