Hadoop2.7.1安装的一些坑

1. 在/etc/profile里更新了JDK的版本,因为Hadoop2.7只能使用JDK1.7,更新后,需要即时更新,可以使用命令>. /etc/profile.

 

2. hadoop 2.7 的Eclipse plugin没有测试成功,但是Hadoop官方网站已经提供了开发工具,实际上也是一个Eclipse的plugin(http://hdt.incubator.apache.org/download.html

 

3. 几个网站对配置Hadoop2 比较有用:

http://www.aboutyun.com/thread-11909-1-1.html

http://www.open-open.com/lib/view/open1436855630959.html 

http://www.cnblogs.com/meiyuanbao/p/3545929.html

 

4. 如果配置了namenode的HA,当format一个namenode,另外一个必须使用hdfs namenode -bootstrapStandby.

 

5. 如果多于一次的format namenode,那么datanode的clusterid总是和第一次的namenode culsterid一样,之后不会改变。两种方式修复这个问题:

 - 修改datanode下的VERSION,改成跟namenode一致

- 删除namenode.dir和datanode.dir,然后重新格式话

 

6. 如果拷贝多个虚拟机,比如数据节点完成配置,拷贝出其它两个,如果data.dir里已经有文件,那么uuid在多个数据节点就是重复的,会导致只有一个数据节点是活着的。其它无法注册。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值