hadoop dfsadmin -report 命令详解

最新推荐文章于 2023-02-19 00:01:13 发布
VIP文章 最新推荐文章于 2023-02-19 00:01:13 发布
阅读量2.4w 收藏 4
点赞数 1
分类专栏： HDFS 文章标签： hadoop rack 脚本 360
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fiberlijun/article/details/4826200
版权

 hadoop dfsadmin -report 

 

 用这个命令可以快速定位出哪些节点down掉了，HDFS的容量以及使用了多少，以及每个节点的硬盘使用情况。

 当然NameNode有个http页面也可以查询，但是这个命令的输出更适合我们的脚本监控dfs的使用状况


Configured Capacity: 77209395855360 (70.22 TB)
Present Capacity: 76079914600683 (69.19 TB)
DFS Remaining: 60534707015680 (55.06 TB)
DFS Used: 15545207585003 (14.14 TB)
DFS Used%: 20.43%

-------------------------------------------------
Datanodes available: 107 (109 total, 2 dead)

Name: 172.16.218.232:50010
Rack: /lg/dminterface0
Decommission Status : Normal
Configured Capacity: 1259272216576 (1.15 TB)
DFS Used: 185585852416 (172.84 GB)
Non DFS Used: 39060951040 (36.38 GB)
DFS Remaining: 1034625413120(963.57 GB)
DFS Used%: 14.74

最低0.47元/天 解锁文章
fiberlijun
关注
  • 1
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
hadoop3.3.0-winutils所有bin文件
02-27
hadoop3.3.0-winutils所有bin文件，亲测有效
hadoop3.3.0-winutils.rar
07-27
Hadoop3.3.0在windows下部署开发环境或者远程开发hadoop集群，对应的 hadoop.dll和winutils.exe以及整个bin目录 ，以及安装方法 亲测可用，有什么问题可以在评论描述
大数据 hadoop命令
weixin_44708062的博客
03-01 385
命令汇总 网络配置： hostname 查看主机名 vi /etc/sysconfig/network 设置主机名 ifconfig 查看ip情况 vi /etc/sysconfig/network-scripts/ifcfg-eth0 设置网络 ...
Hadoop基本命令
08-30 746
======================Master========================= 查看Datanode的运行情况 命令：hadoop dfsadmin -repor网页查看：http://192.168.242.128:50030/jobtracker.jsp
Hadoop Hdfs常用命令
m0_67400973的博客
08-16 1138
本文档介绍Hadoop hdfs系统的一些常用命令。操作hdfs系统可以使用hadoop fs 也可以使用 hdfs dfs ,两者效果一样。
hadoop HDFS常用文件操作命令
weixin_33901926的博客
04-14 4545
命令基本格式: hadoop fs -cmd < args > 1.ls hadoop fs -ls / 列出hdfs文件系统根目录下的目录和文件 hadoop fs -ls -R / 列出hdfs文件系统所有的目录和文件 2.put hadoop fs -put < local file &...
大数据开发之Hadoop篇----hdfs dfsadmin命令
weixin_39702831的博客
10-16 8377
今天我们来了解一下hdfs dfsadmin这个命令，前面我们已经多次使用了hdfs dfs这个命令来对hdfs上的文件进行操作了。而是在生产上面我们还是会遇到不同的情况。今天我们简单讲解一下hdfs dfsadmin中的两个命令，以及他们在生产当中是怎样使用的 1，hdfs dfsadmin -report 这个命令其实是用来查看整个hdfs的健康情况的，因为我们现在是使用cdh的版本，他已经...
hadoop dfsadmin -report
weixin_59295776的博客
11-20 1387
hadoop dfsadmin -report 这个命令可以快速定位出哪些节点down掉了，HDFS的容量以及使用了多少，以及每个节点的硬盘使用情况。 当然NameNode有个http页面也可以查询，但是这个命令的输出更适合我们的脚本监控dfs的使用状况 Configured Capacity: 77209395855360 (70.22 TB) Present Capacity: 76079914600683 (69.19 TB) DFS Remaining: 6053470701568...
HDFS
KamRoseLee的博客
10-23 297
HDFS Distributed File System 数据量越来越多，在一个操作系统管辖的范围存不下了，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，因此迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统 。 是一种允许文件通过网络在多台主机上分享的文件系统，可让多机器上的多用户分享文件和存储空间。 通透性。让实际上是通过网络来访问文件的动作，由程序与用户看来...
HDFS命令
weixin_51699336的博客
06-11 1691
hdfs内部进行文件移动：hdfs dfs -mv /hdfs文件1 /hdfs文件2 4.上传文件 本地文件放到hdfs某个目录：hdfs dfs -put /本地文件/ /hdfs目录/ 5.下载文件 将hdfs文件下载到linux本地 6.文件内容 如果数据量比较大，不能使用 查看hello.txt文件内容：hdfs dfs -cat /test/hello.txt 查看文件末尾，一直等待查看：hdfs dfs -tail -f /path 查看文件的大小：hdfs dfs -du
hadoop dfsadmin -report命令详细信息
知识的力量
11-07 1650
# hadoop dfsadmin -report DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it. Configured Capacity: 785128114790400 (714.07 TB) Presen
Hadoop下载 hadoop-3.3.3.tar.gz
07-06
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不...
hadoop-common-2.2.0-bin-master.zip
04-30
hadoop-common-2.2.0-bin-master(包含windows端开发Hadoop和Spark需要的winutils.exe),Windows下IDEA开发Hadoop和Spark程序会报错，原因是因为如果本机操作系统是windows，在程序中使用了hadoop相关的东西，比如写入...
hadoop hdfs-site配置文件详解
最新发布
03-07
hadoop hdfs-site配置文件详解
Hadoop：Hadoop基本命令
皮皮blog
05-07 4364
常用命令http//常用命令//dest/123//dest/123。
大数据02-HDFS的使用和基本命令
weixin_45735391的博客
02-19 2460
HDFS(Hadoop Distribute File System)是大数据领域一种非常可靠的存储系统，它以分布式方式存储超大数据量文件，但它并不适合存储大量的小数据量文件。同时HDFS是Hadoop和其他组件的数据存储层，运行在由价格廉价的商用机器组成的集群上的，而价格低廉的机器发生故障的几率比较高，因此HDFS在设计上采取了多种机制，在硬件故障的情况下保障数据的完整性。兼容廉价的硬件设备: 实现在硬件故障的情况下也能保障数据的完整性流数据读写：不支持随机读写的操作大数据集。
Hadoop之HDFS
lkm0522的博客
07-26 903
HDFS: 1.HDFS文件系统: HDFS是大数据开源框架hadoop的组件之一，全称（Hadoop Distributed File System），它是一个分布式文件系统，由多台服务器联合起来实现文件存储功能,通过目录树来定位文件，集群中的服务器都有有各自的角色. 2.HDFS优缺点: 优点: 1.数据通过副本存储，提高容错性 2.能够处理PB级及以上数据，可处理百万级文件数量 3.节约成本，可分布在“廉价”机器上 缺点: 1.不适合低延时数据访问 2.不适合对大量文件的存储和访问 3.单线程操作文件
HDFS笔记
code__gease的博客
03-20 2077
查看常用命令： hdfs --help 可以查看能用哪些 HDFS 命令，以下为可能会用到的一些命令 dfsadmin run a DFS admin client fsck run a DFS filesystem checking utility dfs run a filesystem command on the file system namenode run the DFS
生产调优HDFS—故障排除
weixin_44966780的博客
12-06 633
生产调优HDFS—故障排除 注意：采用三台服务器即可，恢复到 Yarn 开始的服务器快照。 NameNode 故障处理 1）需求： NameNode 进程挂了并且存储的数据也丢失了，如何恢复 NameNode 2）故障模拟 （1）kill -9 NameNode 进程 （2）删除 NameNode 存储的数据（/opt/module/hadoop-3.1.3/data/tmp/dfs/name） rm -rf /opt/module/hadoop3.1.3/data/dfs/name/* 3）问题解决

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值