moosefs mysql_CentOS 安装moosefs

最新推荐文章于 2021-02-17 17:58:48 发布
最新推荐文章于 2021-02-17 17:58:48 发布
阅读量113 收藏
点赞数
文章标签： moosefs mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39765290/article/details/113903445
版权

安装MFS基本步骤

主机IP地址分配如下

主控服务器Master Server 192.168.88.161

主控服务器 Metalogger Server 192.168.88.162

存储块服务器 Chunk Server 192.168.88.163 AND 192.168.88.164

客户端主机 Clients 192.168.88.165

===========================================================

一、         主控服务器Master Server 安装

将mfs-1.6.26.tar.gz上传到/usr/software下。

安装所需组件

[root@MFS-Master ~]# yum install cmake make –y

[root@MFS-Master ~]# yum install gcc gcc-c++ autoconf automake zlib* -y

添加mfs组。

[root@MFS-Master ~]# groupadd mfs

新增系统用户

[root@MFS-Master ~]# useradd -g mfs mfs

切换目录

[root@MFS-Master ~]# cd /usr/software/

解压mfs-1.6.26.tar.gz文件

[root@MFS-Master software]# tar -zxvf mfs-1.6.26.tar.gz

进入安装目录

[root@MFS-Master software]# cd mfs-1.6.26

用户配置

[root@MFS-Master software]# ./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs

编译并安装

[root@MFS-Chunk1 mfs-1.6.26]# make && make install

切换目录

[root@MFS-Master /]# cd /usr/local/mfs/etc/

复制置文件

[root@MFS-Master etc]# cp mfsmaster.cfg.dist mfsmaster.cfg

[root@MFS-Master etc]# cp mfsexports.cfg.dist mfsexports.cfg

主配置文件说明

修改DATA_PATH指定的目录要权限为mfs

[root@MFS-Master etc]# chown -R mfs:mfs /usr/local/mfs/var/mfs

注意开通监听的端口(先关闭IPTABLES)

service iptables stop

配置mfsexports.cfg文件

[root@MFS-Master etc]# vi mfsexports.cfg

修改红框中的内容为

192.168.88.0/24                 /       rw,alldirs,maproot=0

该文件每一个条目分为三部分：

第一部分：客户端的ip地址

第二部分：被挂接的目录

第三部分：客户端拥有的权

地址可以指定的几种表现形式：

*                          所有的ip地址

n.n.n.n               单个ip地址

n.n.n.n/b           IP网络地址/位数掩码

n.n.n.n/m.m.m.m    IP网络地址/子网掩码

f.f.f.f-t.t.t.t                 IP段

目录部分需要注意两点：

/        标识MooseFS 根;

.       表示MFSMETA 文件系

权限部分：

ro               只读模式共享

rw              的方式共享

alldirs                 许挂载任何指定的子目录

maproot  映射为root，还是指定的用户

password 指定客户端密码

复制文件

[root@MFS-Master etc]# cp /usr/local/mfs/var/mfs/metadata.mfs.empty /usr/local/mfs/var/mfs/metadata.mfs

启动服务

[root@MFS-Master etc]# /usr/local/mfs/sbin/mfsmaster start

启动监控服务

为了监控MooseFS 当前运行状态，我们可以运行 CGI 监控服务，这样就可以用浏览器查看整个MFS的动行情况

[root@MFS-Master etc]# /usr/local/mfs/sbin/mfscgiserv

在浏览器地址栏输入 http://192.168.88.161:9425 即可查看master 的运行情况

要经常性的查看系统日志

[root@MFS-Master etc]# tail -f /var/log/messages

主控服务器Master Server安装完成

二、         备份服务器 Backup Server(metalogger)安装

将mfs-1.6.26.tar.gz上传制/usr/software下。

安装所需组件

[root@MFS-Master ~]# yum install cmake make –y

[root@MFS-Master ~]# yum install gcc gcc-c++ autoconf automake zlib* -y

添加mfs组。

[root@MFS-Master ~]# groupadd mfs

新增系统用户

[root@MFS-Master ~]# useradd -g mfs mfs

切换目录

[root@MFS-Master ~]# cd /usr/software/

解压mfs-1.6.26.tar.gz文件

[root@MFS-Master software]# tar -zxvf mfs-1.6.26.tar.gz

进入安装目录

[root@MFS-Master software]# cd mfs-1.6.26

用户配置

[root@MFS-Master software]# ./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs

编译并安装

[root@MFS-Chunk1 mfs-1.6.26]# make && make install

切换目录

[root@MFS-Master /]# cd /usr/local/mfs/etc/

复制置文件

[root@MFS-Metalogger etc]# cp mfsmetalogger.cfg.dist mfsmetalogger.cfg

修改配置文件

[root@MFS-Metalogger etc]# vi mfsmetalogger.cfg

在配置文件中添加一行 MASTER_HOST = 192.168.88.161(主控服务器的IP)

再将 MASTER_PORT = 9419 这行的注释打开

(注：

MASTER_HOST 不能为localhost或127.0.0.1，要使用对外IP。

MASTER_PORT必须为元数据服务器配置中MATOCS_LISTEN_PORT指定的端口，且IP必须被master允许。)

启动服务

[root@MFS-Metalogger mfs]# /usr/local/mfs/sbin/mfsmetalogger start

(注：需要将主控服务器打开)

备份服务器 Backup Server(metalogger)安装完成

三、         存储服务器 Chunk Server 安装

将mfs-1.6.26.tar.gz上传制/usr/software下。

安装所需组件

[root@MFS-Master ~]# yum install cmake make –y

[root@MFS-Master ~]# yum install gcc gcc-c++ autoconf automake zlib* -y

添加mfs组。

[root@MFS-Master ~]# groupadd mfs

新增系统用户

[root@MFS-Master ~]# useradd -g mfs mfs

切换目录

[root@MFS-Master ~]# cd /usr/software/

解压mfs-1.6.26.tar.gz文件

[root@MFS-Master software]# tar -zxvf mfs-1.6.26.tar.gz

进入安装目录

[root@MFS-Master software]# cd mfs-1.6.26

用户配置

[root@MFS-Master software]# ./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs

编译并安装

[root@MFS-Chunk1 mfs-1.6.26]# make && make install

切换目录

[root@MFS-Chunk1 mfs-1.6.26]# cd /usr/local/mfs/etc/

复制配置文件

[root@MFS-Chunk1 etc]# cp mfschunkserver.cfg.dist mfschunkserver.cfg

[root@MFS-Chunk1 etc]# cp mfshdd.cfg.dist mfshdd.cfg

修改配置文件

[root@MFS-Chunk1 etc]# vi mfschunkserver.cfg

在配置文件中添加一行 MASTER_HOST = 192.168.88.161(主控服务器的IP)

再将 MASTER_PORT = 9420 这行的注释打开

[root@MFS-Chunk1 etc]# vi mfshdd.cfg

(注：需要在根目录下创建一个data的目录 mkdir data)

修改权限

需要让mfs用户拥有写目录的权限

[root@MFS-Chunk1 etc]# cd /

[root@mysql_master /]# mkdir data

[root@MFS-Chunk1 /]# chown -R mfs:mfs /data

启动服务

[root@MFS-Chunk1 /]# /usr/local/mfs/sbin/mfschunkserver start

(注：需要将主控服务器打开)

第二个存储服务器的安装和配置相同

四、         客户端安装

将fuse-2.9.2.tar.gz上传制/usr/software下

将mfs-1.6.26.tar.gz上传制/usr/software下

FUSE安装

[root@mysql1 ~]# cd /usr/software/

解压文件

[root@mysql1 software]# tar -zxvf fuse-2.9.2.tar.gz

切换目录

[root@mysql1 software]# cd fuse-2.9.2

配置 一下

[root@mysql1 fuse-2.9.2]# ./configure

编译安装

[root@mysql1 fuse-2.9.2]#

修改环境变量

[root@mysql1 fuse-2.9.2]# echo 'export PKG_CONFIG_PATH=/usr/local/lib/pkgconfig:$PKG_CONFIG_PATH' >>/etc/profile

[root@mysql1 fuse-2.9.2]# source /etc/profile

[root@mysql1 fuse-2.9.2]# modprobe fuse

MFSMount安装

添加mfs组。

[root@MFS-Master ~]# groupadd mfs

新增系统用户

[root@MFS-Master ~]# useradd -g mfs mfs

进入目录

[root@MFS-Master ~]# cd /usr/software/

解压mfs-1.6.26.tar.gz文件

[root@MFS-Master software]# tar -zxvf mfs-1.6.26.tar.gz

进入安装目录

[root@MFS-Master software]# cd mfs-1.6.26

用户配置

[root@MFS-Master software]# ./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs

编译并安装

[root@MFS-Chunk1 mfs-1.6.26]# make && make install

创建挂接点

[root@mysql1 bin]# cd /

[root@mysql1 /]# mkdir /mnt/mfs

[root@mysql1 /]# cd /usr/local/mfs/bin/

[root@mysql1 bin]# /usr/local/mfs/bin/mfsmount /mnt/mfs -H 192.168.88.161

(注：所有的MFS都是挂接同一个元数据服务器master,而不是其他数据存储服务器chunkserver)

挂接垃圾箱

[root@mysql1 bin]# cd /

[root@mysql1 /]# mkdir /mnt/mfsmeta

[root@mysql1 /]# cd /usr/local/mfs/bin/

[root@mysql1 bin]# /usr/local/mfs/bin/mfsmount -m /mnt/mfsmeta -H 192.168.88.161

设置文件副本数量

[root@mysql1 bin]# /usr/local/mfs/bin/mfssetgoal 2 /mnt/mfs

(注：设置该数值时，不要超过ChunkServer的数量)

相关命令

启动master服务

/usr/local/mfs/sbin/mfsmaster start

停止master服务

/usr/local/mfs/sbin/mfsmaster stop

(注：一定要安全停止master server是非常必要的，最好不要用kill。利用mfsmaster –s来安全停止master serve)

启动和停止web gui

启动： /usr/local/mfs/sbin/mfscgiserv

停止： kill /usr/local/mfs/sbin/mfscgiserv

启动chunkvserver服务

/usr/local/mfs/sbin/mfschunkserver start

停止chunksever服务

/usr/local/mfs/sbin/mfschunkserver stop

启动metalogger服务

/usr/local/mfs/sbin/mfsmetalogger start

停止metalogger服务

/usr/local/mfs/sbin/mfsmetalogger stop

设置副本 的份数，推荐3份

/usr/local/mfs/bin/mfssetgoal -r 3 /mnt/mfs

(注：如果之前设置为副本为2，用 –r 修改副本数为3，会将之前副本为2的文件再增加一个副本)

查看挂载的目录有设置了几个副 本

[root@Client /]# /usr/local/mfs/bin/mfsgetgoal /mnt/mfs/

查看一个文件有几个CHUNK，有几个COPY

[root@mysql1 mfs]# /usr/local/mfs/bin/mfsfileinfo test10.rar

查看目录下所有信息

[root@mysql1 mfs]# /usr/local/mfs/bin/mfsdirinfo /mnt/mfs

设置垃圾箱删除文件时间

[root@mysql1 mfs]# /usr/local/mfs/bin/mfssettrashtime 3600 /mnt/mfs/

挂接垃圾箱

[root@mysql1 bin]# /usr/local/mfs/bin/mfsmount -m /mnt/mfsmeta -H 192.168.88.161

[root@mysql1 bin]# ls /mnt/ mfsmeta /trash

恢复被删除的文件

被删除的文件名由一个八位十六进制数和被删文件的文件名组成

[root@mysql1 trash]# cd /mnt/ mfsmeta /trash/

只要将要恢复的文件移动到undel文件夹中，文件就恢复了

[root@mysql1 trash]# mv '0000002B|test3.rar' undel

恢复数据

第一种方式：通过备份Master的/usr/local/mfs/var/mfs文件夹下的文件进行恢复

1、          先备份Master Server的/usr/local/mfs/var/mfs文件夹下的文件(可以通过crontab来完成)

2、          将好使的Master Server的/usr/local/mfs/var/mfs下的文件删除

3、          将备份的文件重新拷贝到/usr/local/mfs/var/mfs文件夹下

4、          将metadata.mfs.back文件改为metadata.mfs

5、          [root@Master etc]# chown -R mfs:mfs /usr/local/mfs/var/mfs

6、          [root@Master etc]# reboot

7、          重启后启动服务/usr/local/mfs/sbin/mfsmaster start，恢复成功。

第二种方式：通过Backup Server进行恢复

1、          重新安装一个Master Server

2、          到Backup Server的/usr/local/mfs/var/mfs/目录下找到metadata_ml.mfs.back文件和最后一个日志文件，我最后一个日志文件是changelog_ml.21.mfs

3、          将这两个文件复制到Master Server的/usr/local/mfs/etc/目录下

4、          执行/usr/local/mfs/sbin/mfsmetarestore -m metadata_ml.mfs.back -o /usr/local/mfs/var/mfs/metadata.mfs changelog_ml.21.mfs

重启后启动服务，恢复成功。

weixin_39765290
关注
MooseFs 3.X 安装（Centos7）
zhaishujie的博客
08-23 1035
参考官方文档：https://moosefs.com/download/#older 环境： IP hostname 系统 192.168.3.23 node3 Centos7.2 192.168.3.24 node4 Centos7.2 192.168.3.25 node5 Centos7.2 节点分布：   Maste...
moosefs mysql_moosefs搭建与应用
weixin_42511217的博客
02-07 302
moosefs搭建与应用MooseFS简介：MooseFS是一个具备冗余容错功能的分布式网络文件系统，它将数据分别存放在多个物理服务器单独磁盘或分区上，确保一份数据有多个备份副本。因此MooseFS是一中很好的分布式存储。接下来我们通过搭建moosefs，并了解的使用。环境主机-centos7：搭建moosefs需要五台主机node1 172.25.0.29 mfsmasternode2 1...
centos下安装moosefs客户端
cxin917的专栏
03-16 1554
（一） 安装MFS客户端 ◆Mfsmount需要依赖FUSE,因此需要先安装好fuse，这里我选用 fuse-2.7.4.tar.gz。 1、解包 tar zxvf fuse-2.7.4.tar.gz 2、切换目录 cd fuse-2.7.4. 3、配置 ./configure 4、编译安装 make；make install 如果系统已经安装了fuse,则跳过这个步骤。 ◆安装M
CentOS 7 下 moosefs 集群安装
老实人张大傻
09-01 563
文章目录机器配置说明安装包准备moosefs 安装包准备fuse 安装包准备fuse 安装moosefs 安装moosefs 用户创建moosefs 依赖包安装解压安装包预编译编译 && 安装配置文件配置启动 mfsmaster启动 mfsmetalogger启动 mfschunkserver测试挂载 机器配置说明 主机名 IP CPU 内存 磁盘 部署 node1 10.10.200.211 2核 4GB 50GB mfsmastermfscgiservmfschunkse
Centos 7.2搭建MooseFS
万博的博客
07-31 751
Centos 7.2搭建MooseFS 安装各个组建 安装官方文档yum安装 https://moosefs.com/download/#older centos例： CentOS / Fedora / RHEL To install MooseFS from officially supported repository on EL7, follow the steps below...
运维笔记_搭建配置Moosefs文件服务器
Gerry_Y的博客
08-06 2178
搭建硬件环境：Citrix_Xencenter      1.找一台性能相对来说不是很差的机器，安装几台Linux服务器就可以完成，是用vmware也一样。  搭建系统环境：Centos 7 备注：Mfs_Data2server 借用了之前一台zabbix服务器担任了此角色，不在Citrix服务器之内；   Moosefs特点：      moo
CentOS 安装moosefs
weixin_30879169的博客
12-26 64
安装MFS基本步骤 主机IP地址分配如下 主控服务器Master Server 192.168.88.161 主控服务器 Metalogger Server 192.168.88.162 存储块服务器 Chunk Server 192.168.88.163 AND 192.168.88.164 客户端主机 Clients 192.168.88.165 ==============...
对象存储之MooseFS
Cloud 享 - 知我所享
07-15 3391
今天分享给大家的是一个可容错、高可用性、高性能、高扩展性的一个网络分布式文件系统MooseFS MooseFS文件系统结构包括以下四个角色 1 管理服务器:负责各个数据存储服务器的管理,文件读写调度,文件空间回收以及恢复.多节点拷贝 2 元数据日志服务器: 负责备份master服务器的变化日志文件，文件类型为changelog_ml.*.mfs，以便于在master server出问题的...
Moosefs(mfs)在云平台下部署全攻略
jsh0123的博客
11-30 1337
我有如下三个节点： Node110.10.92.51 192.168.10.43 Node210.10.92.52 192.168.10.45 Node310.10.92.53 192.168.10.46 其中10.10.92.*的ip为云平台管理使用的ip，192.168.10.*为局域网ip Moosefs主要有4种角色，master，chunk，metalog，client，四种角
mysql nfs存储_NFS存储服务及部署
weixin_42220853的博客
02-17 917
1 NFS简介1.1 什么是NFSNFS=Network File System=网络文件系统。主要功能是通过网络(一般是局域网)让不同的主机系统之间可以共享文件或目录。NFS客户端(一般为应用服务器，例如web)可以通过挂载(mount)的方式将NFS服务器端共享的数据目录挂载到NFS客户端本地系统中(就是某一个挂载点下)。从客户端本地看，NFS服务器端共享的目录就好像是客户端自己的磁盘分区或者...
技术资料分享nRF24L01P(新版无线模块控制IC)很好的技术资料.zip
11-08
技术资料分享nRF24L01P(新版无线模块控制IC)很好的技术资料.zip
C++ 课程设计项目，基于 Qt 制作的经典小游戏愤怒的小鸟 FlappyBird源代码
11-08
C++ 课程设计项目，基于 Qt 制作的经典小游戏愤怒的小鸟 FlappyBird源代码 点击屏幕使小鸟向上飞行 不要让小鸟撞到障碍物
控件以及双指放大缩小图片、单指拖动图片.zip
11-08
内容概要：本资源聚焦 Android 编程实战，包含毕业设计示例、完整的 Android 项目源码及文档分享。采用 MVC 模式进行架构设计，结合 JSP 技术与 SQL Server 2000 数据库管理系统，实现高效的 Android 应用开发。 适用人群：Android 开发初学者、计算机专业学生进行毕业设计参考、希望提升 Android 开发技能的程序员。 实用场景及目标：适用于开发各类 Android 应用项目，帮助开发者快速构建稳定、功能丰富的应用程序，同时为毕业设计提供优质的模板和思路。 说明：资源提供了详细的代码注释和文档说明，方便学习者理解和上手，助力提升 Android 开发能力和项目实战经验。
【路径规划】基于matlab FMM快速行进法船舶路径规划【Matlab仿真 2291期】.md
11-08
CSDN Matlab武动乾坤上传的资料均有对应的代码，代码均可运行，亲测可用，适合小白； 1、代码压缩包内容 主函数：main.m； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开main.m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描博客文章底部QQ名片； 4.1 博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作
Python基于 YOLOv8 的甲骨文原始拓片图像单字分割识别模型源代码+使用说明
11-08
针对原始拓片图像中的甲骨文文字分割识别包括以下两个阶段： 目标检测：基于 YOLOv8 目标检测模型，对甲骨文文字所在的矩形区域进行提取。 字符识别：基于 YOLOv8 图像分类模型，对文字图像进行分类，判断该字形所代表的具体字符内容。 同时基于 PyQt5 制作了一个简单的识别器前端程序。 使用说明 首先安装环境依赖包，项目目前采用 ONNX Runtime 部署模型推理。 pip install -r requirements.txt 若需要使用 GPU 进行推理，则需要安装： pip install onnxruntime-gpu 可以在本项目 Releases 中下载我训练好的模型权重文件，解压到项目中相应的位置（位于 inferences/models/ 下），运行 main.py 即可。 python main.py
几种常见简单滤波器用于二维图像降噪，包括均值、中值、高斯、低通、双边滤波器，语言是python
11-08
每个滤波器均打包在不同的文件之内，以其功能命名，有均值滤波器、中值滤波器、高斯滤波器、低通滤波器、双边滤波器。应用场景为二维mat矩阵，同理可扩展到任意二维图像降噪，读者仅需更改输入输出文件路径即可调用
JavaScript文本转语音
最新发布
11-08
JavaScript文本转语音
计算机实验室排课与查询系统+ssm
11-08
需要软件：eclipse/idea,maven环境，jdk1.8，mysql数据库 小程序采用uniapp技术开发，java作为后台代码，技术用到springmvc, 所有程序保证可以运行，项目功能参考文章，如遇到运行不了请联系作者获取源码，源码制作不易， 希望多多支持给予好评。 二、项目技术 开发语言：Java 数据库：MySQL 项目管理工具：Maven 前端技术：JSP+HTML 后端技术：SSM（Spring+SpringMVC+MyBatis） 前端框架：uniapp 三、运行环境 操作系统：Windows、macOS都可以 JDK版本：JDK1.8以上都可以 开发工具：IDEA、Ecplise都可以 数据库: MySQL5.7/8.0版本均可 小程序运行软件：微信开发者工具 Web应用服务器：7.x、8.x、9.x版本均可
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值