本文介绍了如何通过HDFS监控服务访问NameNode的50070端口来查看HDFS文件系统的统计信息，包括配置容量、剩余DFS空间、非DFS使用情况等。此外，还讲解了通过命令行工具`hdfs dfsadmin -report`及其不同选项查询集群状态，如在线节点、失效节点和停用节点的信息。内容适用于Hadoop-2.6.4版本。
通过HDFS监控服务可以查询到大量相关信息，HDFS的监控服务是通过节点（NameNode）的端口50070来进行访问。
例：在浏览器地址栏输入“http://master:50070/”来展现当前HDFS文件系统的基本统计信息，下面是我自己的HDFS文件系统的基本统计信息
可以看到Summary下
①Configured Capacity：表示已配置的文件系统存储总量为51.51GB。
②DFS Remaining：表示可使用的DFS存储总量为43.91GB。
③Non DFS Used：表示被非DFS的应用所占用的存储总量为7.6GB，比如本地目录中的Linux文件。
④DFS Used：表示已使用的DFS存储总量为180KB。
⑤Live Nodes：在线的数据节点（DataNode）共3个。
Hadoop也提供了通过命令行去查询HDFS信息的方式。在服务器终端输入命令“hdfs dfsadmin -report”即可获得各子项的用法：
①-report：输出文件系统的基本信息以及相关数据统计。
②-report -l
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
