三分钟入门大数据之ZooKeeper和Yarn之间的区别与联系是什么？

哈喽，大家好，我是汉斯老师。近几年来，互联网行业由于较高的薪资收入，受到许多人的追捧。很多年轻的学子，或是其他行业的有志青年，都想要投身到这个行业中来。然而一方面受到“互联网寒冬”的影响，最近频频传出各家知名互联网公司裁员缩编的消息；另一方面，大量的人才涌入，又使得互联网产业在职场上呈现出供过于求的特征，并最终导致了职场上的激烈竞争。那么互联网行业未来的潜力在哪里？我们又应该在哪个方向上发力，才能保证自己可以获得一份高薪而稳定的工作？基于多年的互联网行业从业经验，汉斯老师在这里向大家推荐大数据方向，希望通过本人的《三分钟入门大数据》和《十分钟精通大数据》等系列文章，帮助所有有志了解学习大数据的朋友掌握大数据的相关知识，也欢迎所有对互联网行业以及大数据领域感兴趣的朋友前来交流。

---

最近有同学向汉斯老师提了一个问题，他说：“大数据组件中，Yarn是一个分布式管理系统，Zookeeper也是一个分布式管理系统，为什么一套体系中，会运行两个管理系统？Yarn和Zookeeper的区别和联系是什么？”

Yarn和ZooKeeper的作用

Yarn是一个分布式资源调度器组件。这个组件的主要作用是在每次接收到请求后，会查看当下的各个子节点的状况，统筹出运算资源的调度方案来保证任务可以顺利执行。通常来说，Yarn所调度的资源常常包括磁盘空间的资源，内存的资源和通讯带宽的资源等。Yarn是Hadoop V2.0开始引入的一个组件，这个组件可以说是针对Hadoop1.0系统所爆露出的计算资源使用不合理等设计上的问题进行的修正和补充。

ZooKeeper是一个分布式的一致性服务组件。分布式系统最大的困难之处在于如何保证系统内各个节点服务器所操作或处理的数据是一致的，或者各自的配置信息是相同的，而ZooKeeper的价值就在于实现了基于分布式的统一化配置管理，命名服务，状态同步等。在ZooKeeper的体系下，会使用一种树状的文件存储系统，这一套系统强调在各个子节点下的文件目录结构，文件名称以及文件内容都是相同的，而ZooKeeper会通过其内部机制，保证在发送增删改等操作时，各个子节点会同步操作。

两者的相似之处在什么地方呢？

A. 都是分布式的

B. 都具备监听和控制子节点运行的能力

Yarn和ZooKeeper的区别

Yarn的核心功能在于资源调度与管理，而ZooKeeper的核心功能在于分布式系统中的一致性服务。