分布式文件系统MooseFS安装步骤

1.安装

1.1 准备安装环境

首先选择一台比较好的服务器做master，如果可以在选择一台做为master的备份服务器最好。然后其他的服务器当chunkserver。

为了方便说明问题，我这里选择为：

Master 服务器 1台192.168.2.98

Chunkserver 服务器 2台192.168.2.222 和 192.168.2.223

Client 服务器 1台192.168.2.55

1.2 安装步骤

(1). fuse-2.8.5.tar.gz

(2). mfs-1.6.20-2.tar.gz

虽然只有客户端才用到fuse， 但是为了统一安装步骤，我们还是在所有的电脑上都安装一下fuse这个模块。

把 fuse-2.8.5.tar.gz和 mfs-1.6.20-2.tar.gz都放到 /opt目录。

1.2.1创建用户：

[root@glusterfsopt]# groupadd mfs

[root@glusterfsopt]# useradd -g mfs mfs

因为MooseFS默认的运行用户为mfs， 所以先创建。

1.2.2安装fuse：

[root@glusterfsopt]# ls /opt/

fuse-2.8.3.tar.gz mfs-1.6.20-2.tar.gz

[root@glusterfsopt]# tar -zxvf fuse-2.8.3.tar.gz

[root@glusterfsopt]# cd fuse-2.8.3

[root@glusterfsfuse-2.8.3]# ./configure

[root@glusterfsfuse-2.8.3]# ./make

[root@glusterfsfuse-2.8.3]# ./make install

[root@glusterfsfuse-2.8.3]# cd ..

按照上面的步骤Fuse即可安装完毕。

1.2.3安装Moosefs：

[root@glusterfsopt]# ls /opt

fuse-2.8.3 fuse-2.8.3.tar.gz mfs-1.6.20-2.tar.gz

[root@glusterfsopt]# tar -zxvf mfs-1.6.20-2.tar.gz

[root@glusterfsopt]# cd mfs-1.6.20-2

[root@glusterfs mfs-1.6.20-2]#./configure --prefix=/usr/local/mfs--with-default-user=mfs --with-default-group=mfs

[root@glusterfs mfs-1.6.20-2]# make

[root@glusterfs mfs-1.6.20-2]# make install

2. 配置说明

首先把所有的配置文件都放到 /etc/mfs 目录

[root@glusterfsetc]# mkdir -p /etc/mfs

[root@glusterfsetc]# cd /opt/mfs-1.6.20-2

[root@glusterfsmfs-1.6.20-2]# cp ./mfsdata/mfshdd.cfg /etc/mfs/

[root@glusterfsmfs-1.6.20-2]# cp ./mfsdata/mfsexports.cfg /etc/mfs/

[root@glusterfsmfs-1.6.20-2]# cp ./mfsdata/mfschunkserver.cfg /etc/mfs/

[root@glusterfsmfs-1.6.20-2]# cp ./mfsdata/mfsmaster.cfg /etc/mfs

[root@glusterfsmfs-1.6.20-2]# cp ./mfsdata/mfsmetalogger.cfg /etc/mfs

[root@glusterfsmfs]# mkdir -p /data/mfs

[root@glusterfsmfs]# chmod -R 777 /data/mfs

下来编辑配置文件：

[root@glusterfs mfs]# vi mfsmaster.cfg

# WORKING_USER =mfs

# WORKING_GROUP =mfs

# SYSLOG_IDENT =mfsmaster

# LOCK_MEMORY = 0

# WORKING_USER =mfs

# WORKING_GROUP =mfs

# SYSLOG_IDENT =mfsmaster

# LOCK_MEMORY = 0

# NICE_LEVEL = -19

EXPORTS_FILENAME = /etc/mfs/mfsexports.cfg

#上面这行必须配置了指向正确的路径

DATA_PATH = /data/mfs

#上面这行为你打算保存数据的目录

# BACK_LOGS = 50

#REPLICATIONS_DELAY_INIT = 300

#REPLICATIONS_DELAY_DISCONNECT = 3600

#MATOML_LISTEN_HOST = *

#MATOML_LISTEN_PORT = 9419

#MATOCS_LISTEN_HOST = *

#MATOCS_LISTEN_PORT = 9420

#MATOCU_LISTEN_HOST = *

#MATOCU_LISTEN_PORT = 9421

# CHUNKS_LOOP_TIME= 300

# CHUNKS_DEL_LIMIT= 100

#CHUNKS_WRITE_REP_LIMIT = 1

#CHUNKS_READ_REP_LIMIT = 5

#REJECT_OLD_CLIENTS = 0

# deprecated, tobe removed in MooseFS 1.7

# LOCK_FILE =/var/run/mfs/mfsmaster.lock

[root@glusterfs mfs]# vi mfschunkserver.cfg

# WORKING_USER =mfs

# WORKING_GROUP =mfs

# SYSLOG_IDENT =mfschunkserver

# LOCK_MEMORY = 0

# NICE_LEVEL = -19

DATA_PATH = /data/mfs

#上面这行为你要保存数据的目录

#MASTER_RECONNECTION_DELAY = 5

# BIND_HOST = *

MASTER_HOST = 192.168.2.85 #这行为master服务器的地址

# MASTER_PORT =9420

# MASTER_TIMEOUT =60

#CSSERV_LISTEN_HOST = *

#CSSERV_LISTEN_PORT = 9422

HDD_CONF_FILENAME = /etc/mfs/mfshdd.cfg

# HDD_TEST_FREQ =10

# deprecated, tobe removed in MooseFS 1.7

# LOCK_FILE =/var/run/mfs/mfschunkserver.lock

# BACK_LOGS = 50

# CSSERV_TIMEOUT =5

[root@glusterfs mfs]# vi mfsmetalogger.cfg

# WORKING_USER =mfs

# WORKING_GROUP =mfs

# SYSLOG_IDENT =mfsmetalogger

# LOCK_MEMORY = 0

# NICE_LEVEL = -19

DATA_PATH = /data/mfs

# BACK_LOGS = 50

#META_DOWNLOAD_FREQ = 24

#MASTER_RECONNECTION_DELAY = 5

MASTER_HOST = 192.168.2.85 #这行为master服务器的地址

# MASTER_PORT =9419

# MASTER_TIMEOUT =60

# deprecated, tobe removed in MooseFS 1.7

# LOCK_FILE =/var/run/mfs/mfsmetalogger.lock

2.1启动master服务器

[root@glusterfs mfs]# cp/usr/local/mfs/var/mfs/metadata.mfs.empty /data/mfs/metadata.mfs

[root@glusterfsmfs]# /usr/local/mfs/sbin/mfsmaster -c /etc/mfs/mfsmaster.cfg start

working directory:/data/mfs

lockfile createdand locked

initializingmfsmaster modules ...

loading sessions... ok

sessions file hasbeen loaded

exports file hasbeen loaded

loading metadata...

create new emptyfilesystemmetadata file has been loaded

no charts datafile - initializing empty charts

master <->metaloggers module: listen on *:9419

master <->chunkservers module: listen on *:9420

main master servermodule: listen on *:9421

mfsmaster daemoninitialized properly

[root@glusterfsmfs]# ps -aux|grep mfsmaster

2.2启动master的备份服务器

[root@glusterfs mfs]# /usr/local/mfs/sbin/mfsmetalogger-c /etc/mfs/mfsmetalogger.cfg start

working directory:/data/mfs

lockfile createdand locked

initializingmfsmetalogger modules ...

mfsmetaloggerdaemon initialized properly

2.3启动chunkserver服务器

chunkserver 服务器需要用到 mfshdd.cfg配置文件，该配置文件的目的其实就是可以让服务器管理多个硬盘，同时在这些硬盘上放置数据。

[root@glusterfsmfs]# vi mfshdd.cfg

# mount points ofHDD drives

#

/mnt/hd1

/mnt/hd2

#etc.

编辑好上面的配置文件后，就可以用下面的命令启动chunkserver了。

[root@glusterfs mfs]#/usr/local/mfs/sbin/mfschunkserver -c /etc/mfs/mfschunkserver.cfg start

MooseFS还带一个web的监控工具，你需要启动mfscgiserv

启动命令如下：

[root@glusterfs mfs]# /usr/local/mfs/sbin/mfscgiserv

然后通过浏览器输入下面的地址即可查看数据保存情况。

http://192.168.2.55:9425/mfs.cgi

2.4挂载客户端

[root@glusterfs mfs]# mkdir -p /mnt/mfs

[root@glusterfs mfs]# chmod -R 777 /mnt/mfs

[root@glusterfs mfs]# /usr/local/mfs/bin/mfsmount/mnt/mfs/ -H 192.168.2.85

[root@glusterfs mfs]# df –h

如果该命令能看到

mfs#192.168.2.85:9421这样的行， 就代表挂载成功了，下来就可以使用了，正式安装完毕。