hadoop常见错误及解决方法

1、解决"no datanode to stop"问题
jps 中看不到namenode
删除/tmp 文件中 红色框 中的文件


节点
$rm -rf /usr/hadoop/tmp/*
$rm -rf /tmp/hadoop*

主管理
$rm -rf /usr/hadoop/tmp/*
$rm -rf /tmp/hadoop*
$hadoop namenode -format
$start-all.sh


2、节点jps没有datanode 和tasktracker 进程


查看节点日志 cat hadoop-hadoop-datanode-Slave2.Hadoop.log日志
ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.lang.IllegalArgumentException: Does not contain a valid host:port authority: file:///
        at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:164)

Master core-site.xml
   
        fs.default.name
        hdfs://192.168.19.100:9000</ value>
   
找个3天才发现,配置节点的时候遗漏的内容。

解决方式:因为需要在每个节点上 配置core-site.xml文件 、 mapred-site.xml文件 、hdfs-site.xml文件、mapred-site.xml文件和conf/Master文件
,所以建议在Master机上 scp -r /usr/hadoop root@节点IP:/usr/  这样只需要修改下conf/slaves文件即可。


3、:50070/nn_browsedfscontent.jsp 无法打开
因为用的虚拟机进行测试,本机电脑无法浏览,但是在虚拟机里面可以打开。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值