HADOOP部署

1.添加用户

2.安装SSH

apt-get install openssh-server  

启动SSH

/etc/init.d/ssh start  

查看SSH是否启动

ps -e | grep ssh  

生成密钥

ssh-keygen -t rsa -P ""  

加入密钥

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys  

登陆SSH

ssh localhost  

3.安装Java

apt-get install openjdk-6-jdk  

java -version  

4.安装hadoop

http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/

chown -R hadoop:hadoop(此为用户,尽量一直用此用户操作) /usr/local/hadoop  

5.设定hadoop-env.sh(Java 安装路径)

进入hadoop目录,打开conf目录下到hadoop-env.sh,添加以下信息:
            export JAVA_HOME=/usr/lib/jvm/java-6-openjdk (视你机器的java安装路径而定)
            export HADOOP_HOME=/usr/local/hadoop     (视安装目录)
            export PATH=$PATH:/usr/local/hadoop/bin  (视安装目录)

配置生效

source /usr/local/hadoop/conf/hadoop-env.sh  

 6.测试

在根目录创建 mkdir input  

 拷贝conf下所有文件到input  sudo cp conf/* input

执行  bin/hadoop jar hadoop-0.20.2-examples.jar wordcount input output  

显示结果 cat output/*

 

 

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值