hadoop的一个恶心错误

最新推荐文章于 2019-01-18 15:42:17 发布
最新推荐文章于 2019-01-18 15:42:17 发布
阅读量94 收藏
点赞数
分类专栏： hadoop 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/iteye_18210/article/details/82131826
版权

今早机器被网管重启了，启动hadoop发现节点都启动不了

slave一直是 not available yet,Zzzzz...

 

看了一下master的端口 netstat - lpnt

发现9000端口的IP是127.0.0.1

 

然后把master的/etc/hosts文件里的127.0.0.1删掉以后，重启集群就正常了。。。

 

有些版本的linux重启机器后会在/etc/hosts文件上面加上127.0.0.1，删掉就可以了

iteye_18210
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【HADOOP】“填坑”指南
JDJRdata的博客
06-09 3432
总有你不知道的大坑等着你............
hadoop常见错误以及处理方法详解
10-27
本篇文章是对hadoop常见错误以及处理方法进行了详细的分析介绍，需要的朋友参考下
Hadoop源码分析5: RPC基本线程
weixin_30764771的博客
05-28 202
1. 数据记录FileStatus public class FileStatus implements Writable { private String filename; private long time; static { // register IPCFileStatus WritableFactories.setFac...
hadoop问题集：5.hive启动报错com.ibm.icu.impl.ICUBinary.getRequiredData
谁伴我闯荡
01-18 1532
参考：https://www.jianshu.com/p/5ec5a509b5a8 报错： Exception in thread "main" java.lang.NoSuchMethodError: com.ibm.icu.impl.ICUBinary.getRequiredData(Ljava/lang/String;)Ljava/nio/ByteBuffer; at com.ibm.icu...
hadoop的关键进程
apple01010105的博客
06-06 399
hadoop集群中主要进程有 master: NameNode, ResourceManager, slaves: DataNode, NodeManager, RunJar, MRAppMaster,YarnChild 其中 RunJar, MRAppMaster,YarnChild与随着某个job的创建而创建，随着job的完成而终止。它们的作用分别是： ...
hadoop常见错误及解决办法！
热门推荐
沉底的石头
05-30 1万+
1：Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out  Answer： 程序里面需要打开多个文件，进行分析，系统一般默认数量是1024，（用ulimit -a可以看到）对于正常使用是够了，但是对于程序来讲，就太少了。 修改办法： 修改2个文件。        /etc/security/limits.
Hadoop安装vim提示错误
09-26
在Ubuntu Linux下创建Hadoop用户，然后在Hadoop中更新apt，更新完毕之后，执行sudo apt-get install vim 报错
一个基于hadoop的大数据实战.zip
最新发布
03-13
人工智能-hadoop
HADOOP实验一1
08-08
HADOOP实验一1
Hadoop开发相关问题总结
06-14 3996
总结自己在Hadoop开发中遇到的问题，主要在mapreduce代码执行方面。大部分来自日常代码执行错误的解决方法，还有一些是对JAVA、Hadoop剖析。对于问题，通过查询stackoverflow、csdn找到了解决方法。汇总出来以后查询方便。内容将不定期更新。
hadoop常见错误及解决方法
TURING.DT
04-13 1039
1、解决"no datanode to stop"问题 jps 中看不到namenode 删除/tmp 文件中 红色框 中的文件 节点 $rm -rf /usr/hadoop/tmp/* $rm -rf /tmp/hadoop* 主管理 $rm -rf /usr/hadoop/tmp/* $rm -rf /tmp/hadoop* $hadoop namenode -f
性能调优
liuwei063608的专栏
03-28 3259
目 录 12 性能调优 12.1 配置原则 12.2 Manager 12.2.1 提升Manager配置服务参数的效率 12.2.2 根据集群节点数优化Manager配置 12.3 HBase 12.3.1 提升BulkLoad效率 12.3.2 提升连续put场景性能 12.3.3 Put和Scan性能综合调优 12.3.4 提升实时
hadoop错误集合
weixin_33884611的博客
11-22 90
2019独角兽企业重金招聘Python工程师标准>>> ...
hadoop下的程序测试及调试信息
jackydai987的专栏
05-25 3910
<br />今天不是什么新的内容，主要介绍下0.20版本下hadoop的调试、计数器、调试信息输出等内容。<br />相信很多人学习hadoop都是从hadoop权威指南开始的，但权威指南使用的hadoop版本是0.19版本的，而有部分人（其中包括我）使用的0.20版本的。相信大家都知道0.20版本相对于0.19版本有了重大的改变。提供了一系列新的API。具体哪些我这里就不具体说了。其中一个跟测试、调试密切相关的就是在0.20版本出现了Context  object（上下文对象）.所以本篇日志就记录一下我在
Hadoop源码解析之申请与分配Container
liushahe2012的博客
04-01 2359
本文从源码方面介绍应用程序的AM在NM上成功启动并向RM注册后，向RM请求资源（Container）到获取资源的整个过程， 以及RM内部涉及的主要工作流程。整个过程可看做以下两个阶段的迭代循环： 阶段1：AM汇报资源需求并领取已经分配到的资源。 阶段2：NM向RM汇报各个Container的运行状态，如果RM发现它上面有空闲的资源，则进行一次资源分配，并将分配的资源保存 到对应的数据结构中
hadoop修改hostname配置为IP配置
sunjiangangok的博客
05-29 8958
为什么需要host配置？涉及host的配置有哪些？
8.大数据学习之旅——hadoop-Hadoop完全分布式配置
零零天
01-10 207
Hadoop完全分布式配置 关闭防火墙 修改主机名 配置hosts文件。将需要搭建集群的主机全部配置到hosts文件中 192.168.32.138 hadoop01 192.168.32.139 hadoop02 192.168.32.140 hadoop03 配置免密登录 安装jdk 安装zk 配置Hadoop 编辑hadoop-env.sh，并且重新生效 编辑core-site...
hadoop live nodes只有一个
09-09
3. 配置问题：可能因为集群配置错误或网络问题等原因，导致只有一个节点能够正常运行。 无论是以上哪种情况，只有一个live nodes都会对Hadoop集群的性能和可用性产生影响。由于没有其他节点用于共享计算和存储任务...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值