![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop学习
杨树1026
这个作者很懒,什么都没留下…
展开
-
hadoop中各组件的作用
Hadoop=HDFS+Yarn+MapReduce+Hbase+Hive+Pig+… 1.HDFS:分布式文件系统,隐藏集群细节,可以看做一块儿超大硬盘 主:namenode,secondarynamenode 从:datanode 2.Yarn:分布式资源管理系统,用于同一管理集群中的资源(内存等) 主:Resourc原创 2016-08-09 16:26:08 · 10893 阅读 · 1 评论 -
zookeeper到底是个什么鬼
高效的分布式协调服务(一处配置全局生效)。包括配置服务、命名服务(类似于DNS)、分布式锁、集群管理 配置服务: 一处修改,全局使用。,zookeeper使用Zab这种一致性协议来提供一致性。现在有很多开源项目使用Zookeeper来维护配置,比如在HBase中,客户端就是连接一个Zookeeper,获得必要的HBase集群的配置信息,然后才可以进一步操作。 命名服务: 类似于DNS域名服原创 2016-08-09 16:38:12 · 885 阅读 · 0 评论