Hadoop 上传时出错以及多次format补救方法

上传文件时显示:File /itcast/anaconda-ks.cfg._COPYING_ could only be written to 0 of the 1 minReplication node

#本来想上传文件,结果出错 
hadoop fs -put anaconda-ks.cfg /itcast
#结果提示:
File /itcast/anaconda-ks.cfg._COPYING_ could only be written to 0 of the 1 minReplication node

输入jps检查java进程,发现没有datanode,这是因为之前进行了两次的format格式化

多次format除了造成数据丢失外,还会导致hdfs集群主从角色之间互不识别。通过删除所有机器hadoop.tmp.dir目录重新format解决

具体方法:

1、先关闭Hadoop(stop-all.sh),再找到hadoop.tmp.dir目录

#转到Hadoop目录 
cd /export/server/hadoop-3.3.0/etc/hadoop

#编辑core-site.xml
vim core-site.xml

#结果,value中的值就是hadoop.tmp.dir保存文件的地址
<property>
    <name>hadoop.tmp.dir</name>
    <value>/export/data/hadoop-3.3.0</value>
</property>

2、删除/export/data/hadoop-3.3.0中的文件

 rm -rf /export/data/hadoop-3.3.0

3、删除日志、缓存文件

rm -rf logs tmp

4、重新格式化

hadoop namenode -format

5、输入jps查看Java进程中是否有datanode,如果有则说明成功,即可再次进行上传文件

  • 1
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值