Hadoop错误8_dfsadmin -report后livenodes为0 或 报错could only be replicated to 0 nodes, instead of 1

最新推荐文章于 2023-04-24 09:33:39 发布
最新推荐文章于 2023-04-24 09:33:39 发布
阅读量2.3k 收藏 3
点赞数 3
分类专栏： Hadoop 原创 文章标签： centos linux hadoop dfsadmin livenodes
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wang_zhenwei/article/details/48027063
版权
在Hadoop环境配置中遇到问题，启动后`dfsadmin -report`显示livenodes为0且报错`could only be replicated to 0 nodes, instead of 1`。解决方法包括：离开安全模式、检查存储空间、重新格式化HDFS、关闭防火墙、检查配置文件、清理hosts文件。通过这些步骤，最终成功解决Hadoop集群通信问题。" 83658504,7371275,利用内容查找XPath属性,"['网页抓取', '数据提取', 'XML', 'HTML']
摘要由CSDN通过智能技术生成

题目中的两个描述相同，发生在Hadoop环境配置过程中，

首次初始化后，启动

sbin/start-dfs.sh

sbin/start-yarn.sh

然后jps查看，namenode和datanode正常启动，

继续往下进行，

sbin/stop-dfs.sh

sbin/stop-yarn.sh

然后又正常关闭，

但是，继续验证是否配置成功时，

bin/hdfs dfsadmin -report

会发现，livenodes的信息全部是0，


出错信息如图所示，

这时，

打开http://master:50070/

通过Web页面看到查看DataNode和NameNode的状态

打开http:

最低0.47元/天 解锁文章
Wang_Zhenwei
关注
专栏目录
hadoop_3_2_0-yarn-3.3.4-1.el7.x86_64.rpm
09-16
Ambari+Bigtop 一站式编译和部署解决方案 https://gitee.com/tt-bigdata/ambari-env
hadoop错误总结
seeker的博客
07-18 1713
hadoop错误总结
Hadoop初始LiveNode个数为0
xueluo0000的专栏
03-30 1111
现象： 1.使用bin/hdfs dfs -put命令无法将本地文件拷贝到HDFS中 2.使用jps命令发现，没有DataNode服务在运行 3.使用localhost:50070发现活节点为0 解决方法： 1.停止hadoop服务 2.删除原有的DataNode 3.重新格式化NameNode 4.重启hadoop服务 没有DataNode问题的详细解释及解决办
hadoop搭建--datanode信息为0，Live datanodes 为0
weixin_36343850的博客
09-09 2530
背景 hadoop集群启动后，无有效的datanode节点，表现形式为： 使用hdfs dfsadmin -report查看节点的情况时，都是0 xf@master01:~/hadoop-2.6.5$ hdfs dfsadmin -report Configured Capacity: 0 (0 B) Present Capacity: 0 (0 B) DFS Remaining: 0 (0 B) DFS Used: 0 (0 B) DFS Used%: NaN% Under replicated bloc
hadoop 搭建3节点集群，遇到Live Nodes显示为0时解决办法
Marlon1993的博客
08-08 1808
首先，尼玛哥在搭建hadoop 的3节点集群时，安装基本的步骤，配置好以下几个文件 core-site.xml hadoop-env.sh hdfs-site.xml yarn-env.sh yarn-site.xml slaves 之后就是格式化NameNode节点， [root@spark1 hadoop]# hdfs namenode...
Hadoop集群环境搭建遇到的问题—— live nodes 为0
qq_68480660的博客
10-04 1431
tips:其实就是第75张ppt上让你改 ip映射搞得。只要把127.0.1.1 master 注释掉就好了，可能是有俩个master 干扰了映射（我猜的^-^）。能正常打开8088端口，但是50070显示的live nodes为0。1.以root用户 打开vim 修改/etc/hosts 文件。如果是跟着下面ppt教程 搭建完了就会遇到这样的问题。3.修改完成退出vim，同理操作另外两个虚拟机。4.再次重启Hadoop集群，就可以了。（上面是解决过了的）
hadoop：could only be replicated to 0 nodes, instead of 1
weixin_34029949的博客
09-12 122
在Hadoop的环境搭建过程中，常常会遇到类似这样的错误信息提示：“could only be replicated to 0 nodes, instead of 1 ”，产生这样的错误原因有多种，这里列举出以下四种常用的解决方法以供参考： 确保master（namenode） 、slaves（datanode）的防火墙已经关闭 确保DFS空间的使用情况 Hadoop默认的hado...
hadoop_3_2_0-mapreduce-3.3.4-1.el7.x86_64.rpm
最新发布
09-16
Ambari+Bigtop 一站式编译和部署解决方案 https://gitee.com/tt-bigdata/ambari-env
hadoop_3_2_0-libhdfspp-3.3.4-1.el7.x86_64.rpm
09-16
Ambari+Bigtop 一站式编译和部署解决方案 https://gitee.com/tt-bigdata/ambari-env
hadoop_3_2_0-httpfs-3.3.4-1.el7.x86_64.rpm
09-16
Ambari+Bigtop 一站式编译和部署解决方案 https://gitee.com/tt-bigdata/ambari-env
hadoop_3_2_0-kms-3.3.4-1.el7.x86_64.rpm
09-16
Ambari+Bigtop 一站式编译和部署解决方案 https://gitee.com/tt-bigdata/ambari-env
大数据开发之Hadoop篇----hdfs dfsadmin命令
weixin_39702831的博客
10-16 8667
今天我们来了解一下hdfs dfsadmin这个命令，前面我们已经多次使用了hdfs dfs这个命令来对hdfs上的文件进行操作了。而是在生产上面我们还是会遇到不同的情况。今天我们简单讲解一下hdfs dfsadmin中的两个命令，以及他们在生产当中是怎样使用的 1，hdfs dfsadmin -report 这个命令其实是用来查看整个hdfs的健康情况的，因为我们现在是使用cdh的版本，他已经...
hadoop dfsadmin -report failed
hzdxw的专栏
07-19 2257
[root@cdh1 sshlocal]# hadoop dfsadmin -report DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it. report: Call From cdh1/192.168.3.110 to cdh1:9000 failed on connection exception: java.net.ConnectExce
hadoop live nodes: 0 的问题
技术宅自娱自乐
11-10 1132
今天搞了一天hadoop部署，live nodes一直显示是0。 网上搜到的解决方案里的错误在/etc/hosts文件的文件没有写master和slaves的ip，虽然都会在slave的log里显示“重新尝试连接master的9000端口”之类的，但我的一开始就吧hosts写好了啊。 后来重新看部署过程突然发觉是不是不止slaves的防火墙要关，master的防火墙也要关。然后就  syste
could only be replicated to 0 nodes, instead of 1解决办法
爱哭的猫的专栏
10-15 780
1、系统或hdfs是否有足够空间(本人就是因为硬盘空间不足导致异常发生) 2、datanode数是否正常 3、是否在safemode 4、防火墙是否关闭 5、关闭hadoop、格式化、重启hadoop
【大数据Hadoop】HDFS3.3.1-DFSAdmin-reconfig能修改的配置项
如切如磋，如琢如磨，臻于至善。
04-24 719
Hadoop 在运行态可以动态的通过的方式去刷新配置文件或者中的配置到 Namenode 或者 Datanode 的 jvm 中，让其生效。那么哪些配置能让其生效呢。
20190319-HDFS详解
鲨鱼胃的博客
03-20 312
文章目录核心设计数据块数据复制HDFS副本存放策略Hadoop心跳机制安全模式原理剖析HDFS工作机制NameNode工作机制DataNode工作机制SecondaryNamenode工作机制HDFS的HA运行机制 核心设计 数据块 HDFS上最基本的存储单位，默认大小128M，小于一个块大小的文件不会占据整个块的空间，快非常适合用于数据备份进而提供数据容错能力和可用性。 数据复制 HDFS为了...
Hadoop启动之后datanode进程在 但50070页面Live Nodes为0
基咯咯
01-03 5944
当正常启动hadoop之后，一般进程都在，而且50070端口可以访问，但是8088端口却不能访问，这里可能有多种原因造成这样： 1、/etc/hosts 中的ip映射不对 2、master与slave之间不能互通 3、hadoop配置文件有错 在子节点中查看日志， 2018-01-03 09:26:48,488 INFO org.apache.hadoop.ipc.Client: Ret
使用hadoop dfsadmin -report命令查看集群运行,结果全为0，解决方法
热门推荐
wangxizhen123的博客
06-14 1万+
使用hadoop dfsadmin -report命令查看集群运行,结果全为0结果如下： [hadoop@mini1 hadoop-2.4.1]$ hadoop dfsadmin -report DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command fo
hadoop异常“could only be replicated to 0 nodes, instead of 1” 解决
05-25
这个异常通常表示 Hadoop 集群中的某个数据块无法成功复制到足够数量的节点上。这可能是由于节点故障、网络...希望这些解决方案能帮助您解决 Hadoop 异常“could only be replicated to 0 nodes, instead of 1”问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值