Hadoop伪分布式模式安装配置步骤

本文详细记录了Hadoop 2.6.5在伪分布式模式下的安装配置过程,包括Java环境准备、SSH密钥配置、Hadoop下载与解压、环境变量设置、配置文件修改、格式化文件系统、启动与停止服务,以及YARN的配置和启动。
摘要由CSDN通过智能技术生成

最近要升级Hadoop的版本,需要重新安装测试环境,特此记录一下安装配置步骤O(_)O


1. 依赖软件

 

1.1 Java


Hadoop 2.7及以上版本需要Java 7,之前的版本支持Java 6,本文使用Hadoop 2.6.5版本,所以安装Java 6就可以了(本文省略安装步骤)

 

1.2 ssh

 

集群、单节点模式都需要用到SSH登陆,安装完SSH之后(本文省略安装步骤)执行以下命令在用户的主文件夹生成密钥和加入授权

 

[root@xxx ~]# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

[root@xxx ~]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

 

* 本文为了方便测试使用root用户,生产环境最好创建一个新用户,例如hadoop,然后用新用户登录之后再执行上述命令

 

生成密钥和加入授权后就执行以下命令进行无密码直接登录

 

[root@xxx ~]# ssh localhost


2. 下载和解压Hadoop


2.1 如果服务器可以访问公网,

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值