- 博客(4)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 集群安全模式
1.NameNode启动时，首先将镜像文件(Fsimage)载入内存，并执行编辑日志(Edits)中的各项操作。一旦在内存中成功建立文件系统元数据的映像，则创建一个新的Fsimage文件和一个空的编辑日志。此时，NameNode开始监听DataNode请求。这个过程期间，NameNode一直运行在安全模式，即NameNode的文件体系对于客户端来说是只读的。2.DataNode启动，系统中的数据块的位置并不是由NameNode维护的，而是以块列表的形式存储在DataNode中，在系统的正常操作期间，Nam
2021-04-30 15:53:50
138
1
原创 Fsimage和Edits概念
NameNode被格式化之后，将在/opt/module/hadoop-2.7.2/data/tmp/dfs/name/current目录中产生如下文件fsimage_0000000000000000000fsimage_0000000000000000000.md5seen_txidVERSION(1)Fsimage文件：HDFS文件系统元数据的一个永久性的检查点，其中包含HDFS文件系统的所有目录和文件inode的序列化信息。(2)Edits文件:存放HDFS文件系统的所有更新操作的路径，文
2021-04-30 15:03:39
891
1
原创 Hadoop副本节点选择
我的集群使用的是hadoop2.7.2版本,副本节点选择机制如下:(1)第一个副本在client所处的节点上,如果客户端在集群外，随机选一个。(2)第二个副本和第一个副本位于相同机架,随机节点。(3)第三个副本位于不同机架，随机节点。...
2021-04-30 14:10:52
419
转载 如何在win10上同时安装python2和python3
https://blog.csdn.net/qj30212/article/details/78565083
2021-04-01 16:43:08
65
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人