![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 87
cyi001
这个作者很懒,什么都没留下…
展开
-
zookeeper
ZooKeeper分布式服务框架主要是用来解决分布式应用中经常遇到的一些数据管理问题,提供分布式、高可用性的协调服务能力。ZooKeeper作为底层组件广泛被上层组件使用并依赖,如Kafka、HDFS、HBase、Storm等,提供配置管理、名字服务、分布式锁、集群管理等功能。ZooKeeper封装了复杂、易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。原创 2023-12-08 13:49:29 · 43 阅读 · 0 评论 -
HDFS分布式文件系统
DataNode是分布式文件系统HDFS的工作节点, 负责数据的存储和读取,会根据客户端 (Client)或者是NameNode的调度进行数据的存储和检索, 并且向NameNode定期 发送自己所存储的块的列表。分级存储:HDFS的异构分级存储框架提供了RAM_DISK 、SSD 、DISK、ARCHIVE这4种存储类型的存储设备,以对应DataNode上可能存在的不同的存储介质。使用抽象块而非整个文件作为存储单元,可简化存储子系统,固定的块大小可方便元数据和文件数据块内容的分开存储;原创 2023-12-08 13:27:17 · 258 阅读 · 0 评论 -
Hadoop生态体系
大数据生态体系及组件介绍原创 2023-12-08 11:27:20 · 47 阅读 · 0 评论