hadoop的Configured Capacity和DFS Remaining变成0的解决办法

最新推荐文章于 2023-11-02 16:04:52 发布
最新推荐文章于 2023-11-02 16:04:52 发布
阅读量5k 收藏 4
点赞数
分类专栏： 大数据平台及运维类 文章标签： hadoop Configured Capacity 0 
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lucia555/article/details/82694319
版权
Configured Capacity:0
Configured Remote Capacity:0 B
DFS Used:0 KB (0%)
Non DFS Used:0 GB
DFS Remaining:0 GB (0%)
Block Pool Used:0 KB (0%)
DataNodes usages% (Min/Median/Max/stdDev):0.00% / 0.00% / 0.00% / 0.00%

 

1.stop你的hdfs和yarn；

2.删除配置文件中tmp文件夹下的所有文件，删除配置文件hdfs.name.dir的文件下的所有文件，删除配置文件中data文件夹下的所有文件；

3.重新format；

4.启动hdfs和yarn即可解决问题；

 

    有问题加QQ群：877769335

    或者用QQ扫描二维码加群：

    

 

 

 

loveProLife
关注
  • 0
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hadoop集群活跃节点为0解决方案
Ichimaru_Gin_的博客
11-14 7108
Hadoop集群活跃节点为0解决方案问题描述我按照教程修改了Hadoop下的配置文件，然后使用start-all.sh启动整个集群。jps查看每个节点该启动的进程都启动了，可以访问master：50070页面，但是其中的Live Nodes项显示为0， 可是我明明有两个data node服务器。解决思路造成这样结果的原因有很多，如多单纯的copy这样的问题去问度娘，很难快速得到满意的答案。但是也可以
hadoop-fuse-dfs安装.docx
07-30
CDH hadoop-fuse-dfs的安装指导，是我在工作过程中安装步鄹的总结。
问题：hdfs管理界面：Summary部分，Configured Capacity: 0 B
dengmanzhou3124的博客
05-28 916
hdfs管理界面：Summary部分，Configured Capacity: 0 B。正常应该不是0，而是显示系统分配给hdfs的剩余容量。 原因：NameNode的clusterID和DataNode的不一致，所以未能启动。之所以会这样，是因为我们执行了多次bin/hdfs namenode -format命令，导致NameNode的clusterID改变而DataNode却...
hadoop上传不了文件之后发现-Configured Capacity: 0 (0 B)
qq_41037012的博客
03-03 1866
hadoop上传不了文件之后发现-Configured Capacity:为0。没有空间了。但是我的电脑空空如也，所以我 hdfs dfsadmin -report 查看hdfs是否真的有空间分配出去，但是Configured Capacity: 0 (0 B).上网百度之后，发现说是多次格式化导致容量分配为0.不过我只格式化过一次。所以问题肯定不在这，我又看了许多文章，发现也有说是host出错了...
记一次Configured Capacity: 0 (0 B)的解决
weixin_34261739的博客
10-17 1035
场景 最近hadoop集群新加了一个节点N，通过Ambari管理一切正常。 过了两天发现，虽然集群每天要进几个G的数据(共8个节点)，但节点N占用空间丝毫没有变化，显然没有进数据啊 日志 查看该节点日志，没有任何异常。 缩小问题范围 为了验证节点N没有进数据，我登录到该节点，并执行hdfs的put操作上传一个本地文件，在web页面中查看该文件的数据块分布。 正常情况，h...
hadoop datanode结点不启动导致dfs控制台显示数据0（Configured Capacity为0）
爱我中华之笔耕不缀！
01-12 3615
hadoop迁移了一次，服务器ip等都改了，我重新调整了一遍， 启动后，进入dfs控制台：http://xxx.xx.xx.xx:50070/dfshealth.html#tab-overview 发现Summary里，显示数据都为0，如Configured Capacity：0；DFS Used:0； 进入几个slave结点，使用jps命令，发现datanode没启动； 查看日志
解决Hadoop的datanode为0问题：There are 0 datanode(s) running and no node(s) are excluded in this operation.
sunmingyang1987的博客
08-09 4398
最近接触了Hadoop，在练习把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中时出现了如题所述错误，目前原因不详，但是按照以下方法成功解决了我的问题： 第一步：停掉Hadoop： 在Hadoop安装目录下执行： ./sbin/stop-dfs.sh 第二步：找到dfs/data下的current文件夹，将其删除 rm -r xxx/dfs/data/current #xxx根据实际情况而定，每个人的可能不同 第三步：执行hadoop namenode-form
Hadoop完全分布式启动成功后，HDFS监控内存等信息全为0
最新发布
zx_8080的博客
11-02 292
4.找到data的VERSION文件，将文件中的clusterID的值换成上边复制的内容。在master节点下找到hadoop-3.1.4的安装目录。3.打开相应路径，找到VERSION，进行复制。2.打开集群的配置文件，找到相应路径。找到下边这行代码复制一下。
Configured Capacity: 0 (0 B) Present Capacity: 0 (0 B) DFS Remaining: 0 (0 B) DFS Used: 0 (0 B) D
hongdunyang的博客
11-28 4515
运行hdfs dfsadmin -report没有报错，但是所有项都为0； Configured Capacity: 0 (0 B) Present Capacity: 0 (0 B) DFS Remaining: 0 (0 B) DFS Used: 0 (0 B) DFS Used%: 0.00% Replicated Blocks: Under replicated blocks: 0 Blo...
hadoop常见问题及解决方法
12-23
hadoop常见问题及解决方法 Hadoop是大数据处理的重要工具，但是在安装和使用Hadoop时，可能会出现一些常见...这些常见的问题及解决方法，能够帮助用户快速解决Hadoop的安装和使用问题，提高Hadoop的使用效率和稳定性。
Hadoop使用常见问题以及解决方法
08-21
但是在使用 Hadoop 时，经常会遇到一些常见的问题，本文将对这些问题进行总结和解决。 Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES 在 Hadoop 中，Shuffle Error 是一个常见的问题，主要是由于系统默认的...
为Hadoop实现构建企业级安全解决方案
02-26
当构建企业级安全解决方案(它可能会围绕着与Hadoop数据集交互的许多应用程序和企业级服务)时，保证Hadoop自身的安全仅仅是安全解决方案的一个方面。各种组织努力对数据采用一致的安全机制，而数据是从采用了不同安全...
Hadoop集群datanode磁盘不均衡的解决方案
02-25
Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况，比如集群中添加新的数据节点，节点与节点之间磁盘大小不一样等等。当hdfs出现不平衡状况的时候，将引发很多问题，比如MR程序无法很好地利用本地...
[精华]linux下hdfs的datanode正常运行，但是hdfs dfsadmin -report全部为0，Configured Capacity：0（0B）的5种解决办法.
weixin_43856994的博客
06-20 1725
datanode正常运行，但是hdfs dfsadmin -report文件空间为0 解决方案：Slave对Master的访问存在问题：1.hosts里ip映射出错，2.hdfs配置文件core-side或hdfs-side等配置出错，尤其是其中的ip地址；3.关闭hdfs，格式化namenode：hdfs namenode -format ，重启。4.namenode的currentID要和datanode的一致，文件在/hadoop/tmp/dfs/name(data)/current/VERSION
hadoop集群启动成功但进入web50070管理界面显示DataNode为0与集群运行,结果全为0的问题总结
IT赵云的博客
04-25 2183
Hadoop完全分布式出现DataNode为0的解决方案 问题：在配置好Hadoop后，jps命令下看见Hadoop服务已经启动,namenode和datanode都已经启动，但进入Hadoop界面还是没有DataNode。 使用hadoop dfsadmin -report命令查看集群运行,结果全为0结果如下： [hadoop@mini1 hadoop-2.4.1]$ hadoop dfsadmin -report DEPRECATED: Use of this script to execut
hadoop集群搭建datenode为0问题的解决
weixin_34220623的博客
03-14 194
   搭建了一个小的实验集群，一共4台机器，一台namenode，三台datenode。运行start-all，发如今namenode上没有报不论什么错误，可是启动后直接显示datenode数量为0。     到datenode上查看日志。发现有这么个错误： ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IO...
解决Hadoop livenode 0/1 livenode数量为0或1的情况
weixin_41684423的博客
04-09 592
经过一些配置文件修改或者重新构建slave中hadoop工程后会导致一些livenode挂掉，导致livenode数量异常 多半是因为hadoop多次经过format namenode而导致结点无法启动了，解决方案： 0.先运行stop-all.sh脚本关掉hadoop 1.删掉所有机器上hadoop文件夹中core-site.xml和和hdfs-site.xml中写到的在集群上的文件夹 2.master节点上重新格式化 hadoop namenode -format ...
hadoop集群启动成功但进入管理界面显示DataNode为0的问题总结
skyanddream的博客
04-29 4044
Hadoop完全分布式出现DataNode为0的解决方案 问题：在配置好Hadoop后，jps命令下看见Hadoop服务已经启动,namenode和datanode都已经启动，但进入Hadoop界面还是没有DataNode。 问题截图 解决方案 1.可能是主机IP地址映射错误 netstat 查看端口9000是否被监听，如果没有进入 vi /etc/hosts 查看是否主机名和IP地址之间...
centos查看在线用户及踢出方法
走走看看
09-18 6285
只需要在SHELL终端中输入命令：w  16:16:06 up 12 min,  1 user,  load average: 0.14, 0.18, 0.13 USER     TTY      FROM             LOGIN@   IDLE   JCPU   PCPU WHAT root    pts/0    192.168.2.45     16:15    6.00s  ...
hadoop fs，hadoop dfs和hdfs dfs区别
04-22
Hadoop是一个基于Java的开源框架，用于处理大规模数据集。Hadoop分布式文件系统（HDFS）是Hadoop存储数据的核心组件之一。HDFS是一个分布式文件系统，意味着它可以跨多个计算机节点存储和处理数据。hadoop fs、hadoop dfs和hdfs dfs是Hadoop中用于访问和管理HDFS的三个命令。 - hadoop fs: hadoop fs 是Hadoop的文件系统shell命令。该命令允许用户执行各种文件系统操作，比如删除、复制、移动和查看文件等。在Hadoop3之后，hadoop fs命令已被弃用，推荐使用hdfs dfs命令。 - hadoop dfs: hadoop dfs是Hadoop 1.x版本中的早期版本的文件系统shell命令。hadoop dfs与hadoop fs执行的操作类似，但现在已经被弃用。 - hdfs dfs: hdfs dfs是最新的Hadoop版本中用于操作HDFS的命令。该命令提供了丰富的选项和参数，使得用户能够执行各种文件系统操作，比如创建、删除、复制、移动和查看文件等。hdfs dfs是Hadoop中最常用的命令之一。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值