Hadoop put命令上传文件异常There are 0 datanode(s) running and no node(s) are excluded

最新推荐文章于 2022-11-07 16:58:50 发布
最新推荐文章于 2022-11-07 16:58:50 发布
阅读量480 收藏 7
点赞数 3
文章标签： hadoop linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45314612/article/details/116680457
版权

在我使用Hadoop put命令上传文件时发生异常，系统直接冒出一堆提示，查看时发现一个文件也没有上传成功。

上网搜索可能是因为格式化两次namenode，导致没有datanode。我的确格式化过两次namenode。使用jps查看，果然没有datanode。

解决方法就是查看配置文件hdfs-site.xml里的两个文件地址。我的是file:/usr/local/hadoop/tmp/dfs/name和file:/usr/local/hadoop/tmp/dfs/data。

删除这两个文件重新格式化过namenode。重启Hadoop，问题就解决了。

成功上传

weixin_45314612
关注
  • 3
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
Hadoop常用shell命令
01-07
显示当前目录结构 #显示当前目录结构 hadoop fs -ls [path] #递归显示当前目录结构 hadoop fs -ls -R [path] #显示根目录下内容 hadoop fs -ls / 创建目录 #创建 lgc 文件夹 ...hadoop fs -put [localsrc]
Hadoop put报错 jps发现没有启动datanode
D1124615130的博客
05-19 336
hadoop -put报错 2020-05-19 10:55:14,815 WARN hdfs.DataStreamer: DataStreamer Exception org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /input._COPYING_ could only be written to 0 of the 1 minReplication nodes. There are 0 datanode(s) running
hadoop常见错误(转载)
CoderLife9192的专栏
03-07 2967
hadoop常见异常 错误解决： 1.如果在bin/hadoop dfs -put /home/test-in input该过程中出现"can only be replicated to node 0, instead of 1",解决办法是打开http://localhost:50070/dfshealth.jsp查看，确定了livenode数目为你的机器实际数目时，再进行put（
HDFS put出错问题解决：There are 0 datanode(s) running and no node(s) are excluded in this operation.
qq_57109508的博客
12-07 1006
(java.io.IOException): File /test/words.txt._COPYING_ could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s) running and no node(s) are excluded in this operation. hdfs上传失败，namenode -format多次失败，DataNode全部掉线， ...
hadoop命令使用put上传文件报错
Rong_Gong的博客
03-18 6603
在学习hadoop的过程中报错如下：WARN hdfs.DFSClient: DataStreamer Exception org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /input/README.txt._COPYING_ could only be replicated to 0 nodes instead o...
put: Cannot create file/test.txt._COPYING_. Name node is in safe mode.
weixin_41895381的博客
04-28 7123
put: Cannot create file/test.txt.COPYING. Name node is in safe mode. 一、可能是因为没有离开安全模式 利用：hadoop dfsadmin -safemode leave命令离开安全模式 如果没有配置hadoop的环境变量需要进入hadoop目录下的bin目录执行上面哪个命令 二、是因为你的磁盘已经爆满导致你离开安全模式后依然报...
put命令here are 2 datanode(s) running and 2 node(s) are excluded in this operation.的解决方法
m0_52630706的博客
11-07 759
put: File /user/jc/input/myFile.txt._COPYING_ could only be replicated to 0 nodes instead of minReplication (=1). There are 2 datanode(s) running and 2 node(s) are excluded in this operation.的解决方法
There are 0 datanode(s) running，解决Hadoop启动时，没有启动datanode
weixin_44724856的博客
06-12 1668
向Hadoop上传文件时出现错误：There are 0 datanode(s) running and no node(s) are excluded in this operation.，用jps命令查看发现datanode没有启动。 解决：
There are 0 datanode(s) running and no node(s) are excluded in this operation.
大黄的博客
11-19 2360
今天特码的用hadoop提交job时候，发现莫名其妙出现这个错误。 最后发现其实就是datanode没有成功启动啊，玛德，jps虽然显示slave节点datanode进程存在，其实是处于假死状态。意思就是所有slave节点的datanode都启动失败。 原因如下：datanode VERSION文件中的clusterID与namenode VERSION文件中的clusterID不一样！！！ datanode VERSION文件的详细位置为/home/lemaker/data/hdfstmp/dfs/
问题解决There are 0 datanode(s) running and no node(s) are excludedin this operation
zazazazaza96的博客
05-01 4438
出现问题：** File/usr/root/input/file01.COPYING could only be replicated to 0 nodes instead ofminRepLication (=1) There are 0 datanode(s) running and no node(s) are excludedin this operation ** 分析： 我们在第一次执...
hadoop 在上传文件到hdfs时出现There are 0 datanode(s) running and no node(s) are excluded in this operation
weixin_42365428的博客
03-15 3213
1. 错误描述 hadoop在执行如下的命令时 hadoop fs -put ~/file1 /input1 出现了There are 0 datanode(s) running and no node(s) are excluded in this operation这个错误，在终端输入jps时发现没有出现 DataNode（数据结点） 2. 解决方式 1 去到hadoop的安装目录，我的是在...
Hadoop集群datanode磁盘不均衡的解决方案
02-25
因业务需要搭建一个新hadoop集群，并将老的hadoop集群中的数据迁移至新的hadoop集群，而且datanode节点不能全部上线，其中还可能会出现节点上线或下线的情况，这个时候就很容易出现机器与机器之间磁盘的均衡的情况，...
hadoop上传文件功能实例代码
08-29
主要介绍了hadoop上传文件功能实例代码,需要的朋友可以参考下
hadoop中一些常用的命令介绍
01-21
假设Hadoop的安装目录HADOOP_HOME为/home/admin/hadoop。启动与关闭启动Hadoop1.进入HADOOP_HOME目录。2.执行sh bin/start-all.sh 关闭Hadoop1.进入HADOOP_HOME目录。2.执行sh bin/stop-all.sh文件操作Hadoop使用的...
hadoop上传文件共5页.pdf.zip
11-21
hadoop上传文件共5页.pdf.zip
hadoop上传文件出错：There are 0 datanode(s) running and no node(s) are excluded in this operation.
vast668的博客
07-27 2848
    org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /kms.sh._COPYING_ could only be replicated to 0 nodes instead of minReplication (=1).  There are 0 datanode(s) running and no node(...
There are 0 datanode(s) running and no node(s) are excluded in this operation
热门推荐
qiruiduni的专栏
12-13 1万+
在hive中，创建表后，使用load data命令加载数据到表中，出现“There are 0 datanode(s) running and no node(s) are excluded in this operation”错误，于是使用jps命令查看datanode节点是否都已经启动，发现都是正常启动 的，然后又使用“hdfs dfsadmin -report”命令查看节点的报告信息，发现没
dfsput操作报“There are 0 datanode(s) running and no node(s) are excluded in this operation”
u010719917的专栏
06-27 6264
.  There are 0 datanode(s) running and no node(s) are excluded in this operation.   $ bin/hdfs dfs -mkdir /user   $ bin/hdfs dfs -mkdir /user/   $bin/hdfs dfs -put etc/hadoop input  报如下错：   17/06/
There are 1 datanode(s) running and no node(s) are excluded in this operation.错误
Pro_jhf的博客
09-13 1万+
在编写jsp的时候发现这个问题，百度了良久之后发现这个问题在这个人的文档里给出了想当的解释，http://blog.sina.com.cn/s/blog_4c248c5801014nd1.html 一开始并没发现问题出在那，经过log查询发现了问题我的hadoop 的datanode竟然没启动。 于是我到／usr／local／hadoop/bin（hadoop安装目录）里开启strar
Hadoop上传文件报错： put: File /user/root/NOTICE.COPYING could only be written to 0 of the 1 minReplication nodes. There are 0 datanode(s) running and 0 node(s) are excluded in this operation.
最新发布
03-11
这是一个技术问题，我可以回答。这个错误通常是由于Hadoop集群中的datanode数量不足或者某些节点不可用导致的。您可以检查datanode的状态，确保它们都在运行，并且尝试增加集群中的datanode数量。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值