![](https://img-blog.csdnimg.cn/20190918140037908.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
分布式系统
++++++
H . C . Y
拥抱开源,学无止境,学以致用。
展开
-
分布式文件系统(2): Hadoop HA With QJM
一分钟让你知道Hadoop是什么Hadoop中的七大节点的作用(HA with QJM)按照表格搭建群集准备环境:Centos7.4JDK1.8下载Zookeeper下载Hadoop2.4下载1、编辑hosts文件(四台都要配置)[root@node01 /]# vim /etc/hosts192.168.200.10 node01192.168.200.20 node...原创 2020-02-29 16:42:13 · 338 阅读 · 0 评论 -
分布式文件系统(2):Hadoop中的七大节点的作用
Hadoop逻辑图:1、NameNode(NN)-NameNode主要功能:接收客户端的读写服务-NameNode保存metadate信息包括:(metadate时元数据:除文件内容后的所有数据)文件owership和permissions文件包括哪些块Block保存在哪几个DataNode(由DataNode启动时上报)-NameNode的metadate信息在...原创 2020-02-29 15:56:18 · 1622 阅读 · 0 评论 -
分布式文件系统(2):一分钟让你知道Hadoop是什么
1、Hadoop是Google的集群系统的开源实现,–Google集群系统:GFS、mapreduce、bigtable–hadoop主要由HDFS、MapReduce、HBase组成目的:解决nutch的海量数据爬取和存储的需要2、HDFS优点:高容错性数据自动保存多个副本副本丢失后,自动恢复适合批处理移动计算而非数据数据位置暴露给计算框架适合大数据处理GB、...原创 2020-02-28 13:15:53 · 351 阅读 · 0 评论 -
分布式文件系统(1):配置GluserFS集群
一GluserFS卷的类型。1.分布卷可以进行扩展磁盘空间不支持数据高可用磁盘损坏数据丢失2.条带卷将文件划分为小块保存在不同的服务器的不同条带分区上加快读写数据的速度支持高性能读写数据使用不支持高可用3.复制卷可用空间为50%,必须是双数将数据复制到多个磁盘上,磁盘损坏支持容错参与复制卷的磁盘空间大小必须一致4.分布条带卷支持分布卷和条带卷的功能扩展磁盘空间,支持...原创 2019-12-24 16:52:35 · 409 阅读 · 0 评论 -
LVM卷的概念,以及在Centos7中如何实现管理和配置磁盘限额
需求描述:添加两块SCSI硬盘并构建LVM,LVM文件系统为xfs,数据库保存在/date目录设置磁盘配额,要求用户jerry最多只能使用500M磁盘空间,accp组中的用户做多使用4GB磁盘空间LVM逻辑卷的作用和特点:作用:硬盘支持动态伸缩。特点:system-config-LVM工具管理分区灵活性强打破传统分区(必须是连续性的)可以跨盘式或者分区扩展来增加磁盘空间提高磁...原创 2019-08-14 16:37:24 · 718 阅读 · 0 评论 -
搭建Samba管理windows的共享数据
1.安装Samba。[root@centos8 ~]# yum -y install samba samba-client2.配置主配置文件。1)基于身份验证的用户。[HR]comment = 人事部 描述path = /benet/HR 文件的绝对路径valid users = @HR 允许访问的用户guest ok = yes 全部允许(任选其一)readonly list ...原创 2019-11-21 16:05:24 · 240 阅读 · 0 评论