今天又是周日,办公室就我一个人,很静很静,只能听到电脑的运行的声音,嗡嗡响,这么好的环境,我不写点东西就对不起自己啦!!
这篇博文写关于MFS的一下东西,先简单介绍一下MFS文件系统的组成:
1、 元数据服务器。在整个体系中负责管理管理文件系统,目前MFS只支持一个元数据服务器master,这是一个单点故障,需要一个性能稳定的服务器来充当。希望今后MFS能支持多个master服务器,进一步提高系统的可靠性。
2、 数据存储服务器chunkserver。真正存储用户数据的服务器。存储文件时,首先把文件分成块,然后这些块在数据服务器chunkserver之间复 制(复制份数可以手工指定,建议设置副本数为3)。数据服务器可以是多个,并且数量越多,可使用的“磁盘空间”越大,可靠性也越高。
3、 客户端。使用MFS文件系统来存储和访问的主机称为MFS的客户端,成功挂接MFS文件系统以后,就可以像以前使用NFS一样共享这个虚拟性的存储了。
一、环境描述:
# WORKING_USER = mfs #运行master server的用户
# WORKING_GROUP = mfs #运行master server的的组
# SYSLOG_IDENT = mfsmaster #是master server在syslog中的标志
# LOCK_MEMORY = 0#是否执行mlockall()以避免mfsmaster进程溢出(默认为0)
# NICE_LEVEL = -19 #运行的优先级
# EXPORTS_FILENAME = /usr/local/mfs/etc/mfsexports.cfg #被挂载目录及权限控制文件的存放位置
# DATA_PATH = /usr/local/mfs/var/mfs #数据存放路径
# BACK_LOGS = 50 #元数据的改变日志文件数量(默认50)
# REPLICATIONS_DELAY_INIT = 300 #延迟复制的时间(默认300s)
# REPLICATIONS_DELAY_DISCONNECT = 3600 #CHUNK SERVER断开复制的延迟
# MATOML_LISTEN_HOST = * #元数据日志服务器监听的IP地址(默认*,代表任何)
# MATOML_LISTEN_PORT = 9419 #元数据日志服务器监听的端口(默认9419)
# MATOCS_LISTEN_HOST = * #用于CHUNK SERVER 连接的IP(默认*,任何IP)
# MATOCS_LISTEN_PORT = 9420 #用于CHUNK SERVER连接的端口(默认9420)
# MATOCU_LISTEN_HOST = * #用于客户端挂载连接的IP(默认*。代表任何IP)
# MATOCU_LISTEN_PORT = 9421#用户客户端挂载连接的端口(默认9421)
# CHUNKS_LOOP_TIME = 300 #chunks的回环频率(默认300s)
# CHUNKS_DEL_LIMIT = 100 #表示在一个loop设备中可以删除chunks的最大数(默认100)
# CHUNKS_WRITE_REP_LIMIT = 1 #在一个循环里复制一个CHUNK SERVER的最大chunks数目(默认1)
# CHUNKS_READ_REP_LIMIT = 5 #在一个循环里从一个CHUNK SERVER 中复制最大chunks数目(默认5)
# REJECT_OLD_CLIENTS = 0 弹出低于1.6.0的客户端挂接(0或1,默认0)
# deprecated, to be removed in MooseFS 1.7
# LOCK_FILE = /var/run/mfs/mfsmaster.lock
#* / ro
#192.168.1.0/24 / rw
#192.168.1.0/24 / rw,alldirs,maproot=0,password=passcode
#10.0.0.0-10.0.0.5 /test rw,maproot=nobody,password=test
#* . rw
#* / rw,alldirs,maproot=0
#192.168.1.0/24 / rw,alldirs,maproot=0,password=passcode
119.147.146.248/24 / rw,alldirs,maproot=0
119.147.146.242/24 /data rw,alldirs,maproot=0,password=123
[root@localhost ~]# echo "/usr/local/mfs/sbin/mfsmaster" >> /etc/rc.local
# WORKING_USER = mfs
# WORKING_GROUP = mfs
# SYSLOG_IDENT = mfsmetalogger
# LOCK_MEMORY = 0
# NICE_LEVEL = -19
# DATA_PATH = /usr/local/mfs/var/mfs
# BACK_LOGS = 50
#META_DOWNLOAD_FREQ = 24
# MASTER_RECONNECTION_DELAY = 5
MASTER_HOST = 119.147.146.246
# MASTER_PORT = 9419
# MASTER_TIMEOUT = 60
# LOCK_FILE = /var/run/mfs/mfsmetalogger.lock
META_DOWNLOAD_FREQ,元数据备份文件下载请求频率,默认24H,即每隔一天从元数据服务器上下载一个metadata.mfs.back文件。当元数据服务器关闭或者出故障时,metadata.mfs.back文件将消失,此时要恢复整个MFS,需要从元数据日志服务器中取的该文件。注意,这个文件和日志文件共同使用才可以恢复整个被损毁的分布式文件系统。
MASTER_HOST,这个文件中需要修改的是MASTER_HOST变量,这个变量的值是MASTER SERVER 的IP地址
4.启动元数据日志服务器
[root@localhost ~]# /usr/local/mfs/sbin/mfsmetalogger start
working directory: /usr/local/mfs/var/mfs
lockfile created and locked
initializing mfsmetalogger modules ...
mfsmetalogger daemon initialized properly
5.开机启动
echo "/usr/local/mfs/sbin/mfsmetalogger" >> /etc/rc.local
查看MFS进程
[root@localhost ~]# ps -ef | grep mfs
mfs 16373 1 0 19:55 ? 00:00:00 /usr/local/mfs/sbin/mfsmetalogger start
查看MFS通讯端口是否打开
[root@localhost ~]# lsof -i:9419
COMMAND PID USER FD TYPE DEVICE SIZE NODE NAME
mfsmetalo 16373 mfs 7u IPv4 119836 TCP 119.147.146.248:42981->119.147.146.246:9419 (ESTABLISHED)
四、安装存储块服务器Chunk servers
1.安装
# WORKING_USER = mfs
# WORKING_GROUP = mfs
# SYSLOG_IDENT = mfschunkserver
# LOCK_MEMORY = 0
# NICE_LEVEL = -19
# DATA_PATH = /usr/local/mfs/var/mfs
# MASTER_RECONNECTION_DELAY = 5
MASTER_HOST = 119.147.146.246 #元数据服务器的名称或地址(主机名或者IP)
MASTER_PORT = 9420
# MASTER_TIMEOUT = 60
# CSSERV_LISTEN_HOST = *
# CSSERV_LISTEN_PORT = 9422 #这个监听端口用于与其他数据储存服务器间的连接,通常是数据复制。
# CSSERV_TIMEOUT = 5
# HDD_CONF_FILENAME = /usr/local/mfs/etc/mfshdd.cfg #分配给MFS使用的磁盘空间配置文件的位置
# HDD_TEST_FREQ = 10
# deprecated, to be removed in MooseFS 1.7
# LOCK_FILE = /var/run/mfs/mfschunkserver.lock
# BACK_LOGS = 50
#/mnt/hd1
#/mnt/hd2
/data #MFS的分区,客户端挂载的目录
Filesystem Size Used Avail Use% Mounted on
/dev/mapper/VolGroupRoot-LogVolRoot
16G 2.6G 13G 18% /
/dev/cciss/c0d0p1 99M 27M 68M 29% /boot
tmpfs 5.9G 0 5.9G 0% /dev/shm
/dev/mapper/VolGroupData-LogVolData
246G 13G 221G 6% /data
/dev/mapper/VolGroupData-LogVolLog
9.7G 2.3G 7.0G 25% /data/logs
119.147.146.246:9421 11G 112M 11G 2% /mnt/mfs
119.147.146.246:9421 on /mnt/mfs type fuse.mfs (rw,nosuid,nodev,allow_other,default_permissions)
今天就简单的写到这里啦,以后具体内容在补充吧。
转载于:https://blog.51cto.com/navyaijm/829227