![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
文章平均质量分 50
涛之博
这个作者很懒,什么都没留下…
展开
-
HDFS元数据管理机制
一、元数据管理概述 HDFS 元数据,按类型分,主要包括以下几个部分: 1、文件、目录自身的属性信息,例如文件名,目录名,修改信息等。 2、文件记录的信息的存储相关的信息,例如存储块信息,分块情况,副本个数等。 3、记录 HDFS 的 Datanode 的信息,用于 DataNode 的管理。 按形式分为内存元数据和元数据文件两种,分别存在内存和磁盘上 HDFS 磁盘上元数据文件分...原创 2018-02-20 23:43:09 · 8387 阅读 · 1 评论 -
Strom与HDFS整合出现的错误
原因分析:这是因为在本地上运行Storm与HDFS项目的时候本地没有权限去操作hdfs的目录,而有权限的是linux上的root用户有所有权限,因此需要打开hdfs上的所有权限供代码运行 hadoop fs -chmod 777 /foo...原创 2018-03-01 12:47:59 · 182 阅读 · 0 评论