hadoop dfsadmin -report 命令详解

最新推荐文章于 2024-03-10 14:50:09 发布
最新推荐文章于 2024-03-10 14:50:09 发布
阅读量2.4w 收藏 4
点赞数 1
分类专栏： HDFS 文章标签： hadoop rack 脚本 360
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fiberlijun/article/details/4826200
版权
本文介绍了Hadoop的dfsadmin -report命令，该命令用于检查HDFS集群的状态，包括节点健康状况、总容量、使用量等信息。此命令的输出对于脚本监控DFS使用情况非常有用。目前，集群中有109个节点，其中2个节点不可用，总容量为70.22TB，已使用14.14TB，剩余55.06TB。
摘要由CSDN通过智能技术生成

 hadoop dfsadmin -report 

 

 用这个命令可以快速定位出哪些节点down掉了，HDFS的容量以及使用了多少，以及每个节点的硬盘使用情况。

 当然NameNode有个http页面也可以查询，但是这个命令的输出更适合我们的脚本监控dfs的使用状况


Configured Capacity: 77209395855360 (70.22 TB)
Present Capacity: 76079914600683 (69.19 TB)
DFS Remaining: 60534707015680 (55.06 TB)
DFS Used: 15545207585003 (14.14 TB)
DFS Used%: 20.43%

-------------------------------------------------
Datanodes available: 107 (109 total, 2 dead)

Name: 172.16.218.232:50010
Rack: /lg/dminterface0
Decommission Status : Normal
Configured Capacity: 1259272216576 (1.15 TB)
DFS Used: 185585852416 (172.84 GB)
Non DFS Used: 39060951040 (36.38 GB)
DFS Remaining: 1034625413120(963.57 GB)
DFS Used%: 14.74

最低0.47元/天 解锁文章
fiberlijun
关注
专栏目录
hadoop 管理命令dfsadmin
let it go的博客
01-17 1万+
dfsadmin 命令用于管理HDFS集群，这些命令常用于管理员。1. （Safemode）安全模式    动作命令把集群切换到安全模式bin/hdfs dfsadmin -safemode [enter/get/leave]数据节点状态列表bin/hadoop dfsadmin -report添加或删除数据节点bin/hadoop dfsadmin -refreshNodes打印网络拓扑 bin
大数据实验使用 hdfs dfsadmin -report命令，查看HDFS使用情况为0,解决方法
Origin_KIMI的博客
11-11 3598
大数据实验使用 hdfs dfsadmin -report命令，查看HDFS使用情况为0,解决方法 自己实验设计的三台虚拟机中的一台Master、Slave1、Slave2 自己（小白）做的实验，遇到了各种错误 （1）、可能是文件配置问题，检查配置文件是否正确 （2）、查看三台虚拟机中的映射是否全部添加 下面的就是我的遇到的（Slave1、Slave2 映射错误） 1、完成了一系列的问题最后执行 hdfs dfsadmin -report 时，情况如下： 2、首先，关闭：把stop-dfs.sh 改成 st
hadoop dfsadmin -report命令详细信息
知识的力量
11-07 1744
# hadoop dfsadmin -report DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it. Configured Capacity: 785128114790400 (714.07 TB) Presen
hadoop dfsadmin -report
weixin_59295776的博客
11-20 1555
hadoop dfsadmin -report 这个命令可以快速定位出哪些节点down掉了，HDFS的容量以及使用了多少，以及每个节点的硬盘使用情况。 当然NameNode有个http页面也可以查询，但是这个命令的输出更适合我们的脚本监控dfs的使用状况 Configured Capacity: 77209395855360 (70.22 TB) Present Capacity: 76079914600683 (69.19 TB) DFS Remaining: 6053470701568...
hadoop dfsadmin
54MD的博客
11-30 305
hadoop dfsadmin -safemode get dfsadmin命令详解  -report：查看文件系统的基本信息和统计信息。 -safeadmin enter | leave | get | wait：安全模式命令。安全模式是NameNode的一种状态，在这种状态下，NameNode不接受对名字空间的更改（只读）；不复制或删除块。NameNode在启动时自动进入安全模式，当配置...
hadoop hdfs dfsadmin 介绍
猎人在吃肉
01-11 7827
一、hdfs dfsadmin -safemode 安全模式  NameNode在启动的时候 首先进入安全模式，如果datanode丢失的block达到一定的比例（由hdfs-site.xml文件中dfs.safemode.threshold.pct决定，默认0.999f），则系统会一直处于安全模式状态即只读状态 ； 否则没有其他情况影响，一般情况下，系统会自动离开安全模式。 dfs.sa
hadoop管理命令——dfsadmin
景山编程-顺道编程
09-04 1355
dfsadmin是一个多任务的工具，我们可以使用它来获取HDFS的状态信息，以及在HDFS上执行的一系列管理操作。 调用方式 例如：hadoop dfsadmin -report dfsadmin命令详解 -report：查看文件系统的基本信息和统计信息。 -safeadmin enter | leave | get | wait：安全模式命令。安全模式是NameNode的一...
hadoop fs常用命令
weixin_42264992的博客
06-14 6024
hdfs常用命令
大数据技术之Hadoop-HDFS用户指南
weixin_42137586的博客
11-22 692
HDFS用户指南目的概览前期准备Web页面Shell 命令DFSAdmin命令Secondary NameNode检查点节点备份节点导入检查点均衡器机架识别安全模式 目的 本文档是使用Hadoop分布式文件系统（HDFS）作为Hadoop集群的一部分或作为独立的通用分布式文件系统的用户的起点。尽管HDFS旨在在许多环境中“正常工作”，但是了解HDFS的工作机制可极大地帮助改进特定集群上的配置和进行...
用命令获取hdfs的基本信息 - hdfs getconf 和 hdfs dfsadmin
老胡的笔记
11-09 5467
用hdfs getconf 和  hdfs dfsadmin 可以获得hdfs的基本信息。
hdfs dfsadmin -report
PeersLee的博客
06-15 936
查看 datanode block 是否均匀 hdfs dfsadmin -report |grep 'DFS Used%'
在hadoop中使用命令hadoop dfsadmin -report没有出现Live datanodes相关代码、使用Java api上传文件出现没有足够的数据节点可用的问题
最新发布
weixin_66383346的博客
03-10 687
不要总是使用hdfs namenode -format，后续还会出现别的问题。刚开始的时候，我忘记怎么开启集群和关闭集群了，然后，每次开启集群就会使用这个命令，这个currentId我不止修改了一次。我是先出现文件上上传的问题，然后通过解决hadoop dfsadmin -report命令的问题后，发现文件上传相关的问题也解决了，算是误打误撞吧。如果文件上传相关的问题还没解决可以去看另一个博主的博客。他好像和我的解决办法不同。文件上传解决办法跳转链接希望能够帮助到你！
大数据开发之Hadoop篇----hdfs dfsadmin命令
weixin_39702831的博客
10-16 8666
今天我们来了解一下hdfs dfsadmin这个命令，前面我们已经多次使用了hdfs dfs这个命令来对hdfs上的文件进行操作了。而是在生产上面我们还是会遇到不同的情况。今天我们简单讲解一下hdfs dfsadmin中的两个命令，以及他们在生产当中是怎样使用的 1，hdfs dfsadmin -report 这个命令其实是用来查看整个hdfs的健康情况的，因为我们现在是使用cdh的版本，他已经...
Hadoop管理命令 dfsadmin
qiezikuaichuan的专栏
06-30 1352
Hadoop管理命令 dfsadmin dfsadmin是一个多任务的工具，我们可以使用它来获取HDFS的状态信息，以及在HDFS上执行的一系列管理操作。 调用方式 例如：Hadoop dfsadmin -report dfsadmin命令详解 -report：查看文件系统的基本信息和统计信息。 -safeadmin enter | lea
./hadoop dsfadmin –report运行出错
naxsu的专栏
03-10 137
./hadoop dsfadmin –report运行出错，哪位知道原因分享一下： $ ./hadoop dsfadmin –report java.lang.NoClassDefFoundError: dsfadmin Caused by: java.lang.ClassNotFoundException: dsfadmin at java.net.URLClassL...
dfsadmin
梦想成真那天
07-11 1349
dfsadmin是一个多任务的工具，我们可以使用它来获取HDFS的状态信息，以及在HDFS上执行的一系列管理操作。 调用方式 例如：Hadoop dfsadmin -report dfsadmin命令详解 -report：查看文件系统的基本信息和统计信息。 -safeadmin enter | leave | get | wait：安全模式命令。安全模式是NameNode的一种状态，在这种
差点忘了hadoop dfsadmin命令了
茂森的专栏
08-14 2224
今天早上使用libhdfs 调用c++接口进行程序调试，由于多次段错误，造成hdfs数据异常，hdfs进入safemode，突然忘记该怎么关闭了，我记得在hadoop很早的版本里面是hadoop dfs里面的，可惜怎么都找不到，纳闷了一会儿，后来恍然，升级后的hadoop已经把dfs的一些管理命令移到了hadoop dfsadmin了，哈哈！
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值