![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据笔记
zookeper
喵咪的窝
这个作者很懒,什么都没留下…
展开
-
ZooKeeper 一
工作机制 特点 * Zoookeer: 由一个leader(领导者),多个follower(跟随者)组成 * Leader会进行投票的发起和决议,更新系统状态。 * follower用于接收客户请求并向客户端返回结果,在选举leader过程中参与偷跑 * 集群只要有半数以上节点存活,Zookeeper集群就能正常服务 * 全局数据一致,每个server都保存一份相同的副本...原创 2019-12-24 00:21:01 · 151 阅读 · 0 评论 -
zookeeper 安装
1、解压安装到、opt/module 2、修改配置文件 zoo.cfg由zoo_sample.cfg改名而来 3、创建zkData和logs文件夹 cd /opt/module/zookeeper-3.4.1 mkdir zkData mkdir logs 4、分别为每台机器增加myid配置 echo '2' >zkData/myid # hadoop122机器 echo '3'...原创 2019-12-24 00:09:16 · 127 阅读 · 0 评论 -
HDFS 简介二
建议初学者先看简介一。 集群的安全模式 NameNode启动时,首先将映像文件(fsimage载入内存,并执行编辑日志(edits中的各项操作。一旦在内存中成功建立文件系统元数据的映像,则创建一个新的fsimage文件和一个空的编辑日志。此时NameNode开始监听DataNode请求。但是此刻,NameNode运行在安全模式,即NameNode的文件系统对于客户端来说是只读的。 系统中的数据块的...原创 2019-12-13 23:24:35 · 227 阅读 · 0 评论 -
HDFS简介一
HDFS概念: HDFS,它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。 HDFS的设计适合一次写入,多次读出的场景,且不支持文件的修改。适合用来做数据分析,并不适合用来做网盘应用。 优缺点 优点: 1)高容错性 (1)数据自动保存多个副本。它通过增加副本的形式,提高容错性。 (2)某一个副本丢...原创 2019-12-09 23:49:09 · 151 阅读 · 1 评论