本文介绍了在Hadoop 2.8中进行namenode格式化后，不同版本fsimage和edits文件的变化，并讨论了在CentOS 6上运行hdfs命令时遇到的native-hadoop库加载错误。解决方案包括使用特定命令创建目录，如'hdfs dfs -mkdir'，并指出命令行提示不影响文件夹实际创建。
第一步格式化namenode
hadoop namenode -format
面我们再看每一个{dfs.name.dir}下存放的文件，执行-format后会在文件夹下生成{dfs.name.dir}/current/fsimage，{dfs.name.dir}/current/edits， {dfs.name.dir}/current/fstime，{dfs.name.dir}/current/VERSION，{dfs.name.dir}/image/fsimage。下面说一下这些文件的具体作用：
fsimage：存储命名空间(实际上就是目录和文件)的元数据信息；
edits：用来存储对命名空间操作的日志信息，实现namenode节点的恢复；
fstime：用来存储check point 的时间；
VERSION：存放namenode的版本信息；
/image/fsimage: 上一次提交前的/current/fsimage文件。
最低0.47元/天 解锁文章
扫一扫
1258
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
