hadoop
关注
分享
扫一扫
Lewy95
瓜皮程序员，专业看足球
展开
-
hadoop完全分布式集群搭建
hadoop完全分布式集群搭建： 一、首先开启几台机器，修改好ip地址，主机名，网卡等 1. 一般拷贝过来的系统，启动后默认网卡不是System eth0，最好修改网卡为eth0（这一步非必需） 输入指令 vim /etc/udev/rules.d/70-persistent-net.rules后 将显示两个网卡信息，删除原来的eth0那栏，再将eth*改为eth0 2. 将获取网络的方...原创 2018-09-17 09:44:02 · 336 阅读 · 0 评论 -
关于hive执行mr时报错Call From hadoop01/192.168.80.128 to 0.0.0.0:10020 failed on connection exception
今天在用hive执行mr时启用42个job，执行到一半的时候突然报了以下的错，以前也没遇到过，不知道是不是job数量太多的原因。错误提示是无法从主机访问到10020端口。 上网查了一下原因：这是因为DataNode 需要访问 MapReduce JobHistory Server，它的默认端口为0.0.0.0:10020 。 报错信息： java.io.IOException: java....原创 2018-10-17 19:10:08 · 2717 阅读 · 2 评论