企业运维实战--MFS、Hadoop分布式文件系统
文章平均质量分 93
企业运维实战--分布式文件系统MFS、Hadoop
Rabbitgo_hyl
生活中可能没有偶然 只有必然
展开
-
企业运维实战--Hadoop学习(一)-- linux下HDFS的搭建、hadoop实现主从复制
企业运维实战--Hadoop学习(一)--linux下HDFS的搭建、hadoop实现主从复制一、Hadoop搭建与配置二、网络文件系统nfs实现hadoop从机同步主机一、Hadoop搭建与配置环境准备:三台纯净的虚拟机,server1负责hadoop主节点配置,server2、server3待定。安装包准备:hadoop安装包,官网可下载jdk tar包在server1中创建hadoop用户,将安装包scp到该用户家目录中解压安装包,设软链接方便使用tar zxf hadoop-3原创 2021-07-09 22:16:18 · 398 阅读 · 4 评论 -
企业运维实战--MFS分布式系统(下)之fence
企业运维实战--MFS分布式系统(下)之fence一、fence简介二、fence安装与配置笔记补充一、fence简介fence作用:在高可用MFS分布式系统中,我们采用iscsi存储方式进行双机热备,备份磁盘的格式未xfs文件系统。由于意外原因,一台主机down掉,另一台主机会接管其人物继续服务,当down掉的主机重新启动时,则会出现两个主机同时对磁盘进行写操作。xfs文件系统若存在超过一台主机同时进行写入操作,两个主机开始“抢夺资源”,则会发生“脑裂”,磁盘会无法使用。fence在检测到已存原创 2021-07-09 21:09:31 · 350 阅读 · 0 评论 -
企业运维实战--MFS分布式文件系统(上)
企业运维实战--MFS布式文件系统(上)前言一、MFS组成简介二、MFS安装和部署三、客户端删除文件并恢复四、storage class ---->通过标签确定五、共享文件iscsi实现mfs高可用六、双机热备份前言本章我们学习MooseFS(MFS)分布式文件管理系统。MFS是一个具备冗余容错功能的分布式网络文件系统,它将数据分别存放在多个物理服务器或单独磁盘或分区上,确保一份数据有多个备份副本。一、MFS组成简介Master servers:管理服务器,在整个体系中负责管理文件系统,原创 2021-07-08 22:20:55 · 447 阅读 · 1 评论