最近要升级Hadoop的版本,需要重新安装测试环境,特此记录一下安装配置步骤O(∩_∩)O
1. 依赖软件
1.1 Java
Hadoop 2.7及以上版本需要Java 7,之前的版本支持Java 6,本文使用Hadoop 2.6.5版本,所以安装Java 6就可以了(本文省略安装步骤)
1.2 ssh
集群、单节点模式都需要用到SSH登陆,安装完SSH之后(本文省略安装步骤)执行以下命令在用户的主文件夹生成密钥和加入授权
[root@xxx ~]# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
[root@xxx ~]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
* 本文为了方便测试使用root用户,生产环境最好创建一个新用户,例如hadoop,然后用新用户登录之后再执行上述命令
生成密钥和加入授权后就执行以下命令进行无密码直接登录
[root@xxx ~]# ssh localhost
2. 下载和解压Hadoop
2.1 如果服务器可以访问公网,