![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
HDFS学习笔记
liu_542449630
这个作者很懒,什么都没留下…
展开
-
HDFS的租约机制 、租约管理 、租约恢复
常见问题写入过程客户端崩溃怎么处理(租约恢复)? NameNode中的租约管理器?租约概念我们知道HDFS文件是write-once-read-many,并且不支持客户端的并行写操作,那么这里就需要一种机制保证对HDFS文件的互斥操作。HDFS提供了租约(Lease)机制来实现这个功能,租约是Namenode给予租约持有者(LeaseHolder, 一般是客户端)在规定时间内拥有文件权限(写文件)的合同。租约申请流程在HDFS中,客户端写文件时需要先从租约管理器(LeaseMana.原创 2020-07-04 10:44:39 · 1198 阅读 · 3 评论 -
HDFS DataNode升级过程
升级需要重点考虑的几个问题DataStorage重要的功能就是管理磁盘存储空间的生命周期。升级是磁盘存储空间生命周期管理中最重要的一个环节,尤其是对于HDFS这样的分布式存储系统,升级需要重点考虑以下几个问题。■ 版本兼容性问题:不同版本之间兼容性的设计,高版本是否需要兼容低版本?不同组件之间,例如Datanode和Namenode之间的版本是否需要一致?■ 升级消耗的磁盘空间问题:我们知道Datanode最主要的功能是存储数据块,而这些数据块往往占用比较大的磁盘空间。如何做到既能保留原...原创 2020-07-04 10:37:24 · 402 阅读 · 0 评论