hadoop安装

 hadoop安装

hadoop的安装分为三种,单机版,伪分布式,集群安装。这里我记下了在三种情况下的区别和共同点。

首先是无论是哪种情况,hadoop必须在所有电脑上安装,包括master和slave节点,并且最好保证hadoop的版本在不同的机器上一致。为了能够运行hadoop,必须要安装java环境,并且要安装ssh,ssh为了在不同机器上提供某种功能,暂时还不知道。然后就是配置hadoop。

1. 安装java环境并安装ssh并且配置免密码登陆。

sudo apt-get install ssh
sudo apt-get install rsync

配置免密码登陆:

cd ~
mkdir .ssh
ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

2. 下载hadoop的binary包,并且解压然后配置hadoop。

tar -zxvf hadoop-binary.jar

在hadoop的binary目录里面配置etc/hadoop/hadoop-env.sh,在其中设置export JAVA_HOME=完整的jdk目录。

3. 为了运行hadoop的简单,可以在环境变量里面添加hadoop的bin:

export PATH=$HADOOP_HOME/bin:$PATH

通过以上步骤后,hadoop的安装算是完成了,但是为了能够以三种方式之一执行某个程序,我们需要不同的配置。这个以后再说。

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值