入门级
文章平均质量分 74
不吃糖️
这个作者很懒,什么都没留下…
展开
-
zookeeper
什么是Zookeeper,Zookeeper的作用是什么,它与NameNode及HMaster如何协作?在没有接触Zookeeper的同学,或许会有这些疑问。这里给大家总结一下。 一、什么是Zookeeper ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig) 的管理员, Apache Hbase和 Apache Solr 以及LinkedIn sensei 等项目中都采用到了 Zookeeper。ZooKeeper是一个分布式的,开放源原创 2021-10-19 15:09:21 · 77 阅读 · 0 评论 -
开源代码框架hadoop
架构 - HDFS:数据存储 -NameNode:元数据(索引) -DataNode:具体的数据 -SeconDaryNameNode:不是NameNode的热备 - Yarn:资源调度 -ResourceManager:所有节点的老大(一个RM管理多个NM) -NodeManager:单个节点的老大(一个NM管理多个container) -container:每一个容器都是一个资源的集合(硬盘,内存,cpu,网络) ..原创 2021-10-16 14:28:16 · 142 阅读 · 0 评论