Ubuntu中安装hadoop(伪分布式模式)

1.安装环境配置

 1)安装java

 2)安装SSH  $sudo apt-get install ssh

 3)解压hadoop安装包 $tar -zxvf hadoop-0.20.2.tar.gz

 4)编辑conf/hadoop-env.sh文件 

      gedit conf/hadoop-env.sh

      在文件中修改export JAVA_HOME=jdk安装路径

2.安装步奏

  1)Hadoop配置

    core-site.xml文档内容:

    <configuration>

         <property>

               <name>fs.default.name</name>

               <value>hdfs://localhost:9000</value>

         </property>

    </configuration>

    hdfs-site.xml文档内容:

    <configuration>

     <property>

           <name>hfs.replication</name>

           <value>1</value>

     </property>

    </configuration>

    mapred-site.xml文档内容

    <configuration>

           <property>

                   <name>mapred.job.tracker</name>

                   <value>localhost:9001</value>

           </property>

    </configuration>

   2)安装SSH并进行免密码SSH设置

    $sudo apt-get install ssh

    生成密钥对,执行如下命令:$ssh-keygen -t rsa

    然后一直按回车键,就会按照默认的选项将生成的秘钥对保存在.ssh/id_rsa文件中。

    进入.ssh目录,执行如下命令:$cp id_rsa.pub authorized_keys

    此后执行$ssh localhost,可以实现用SSH连接并且不需要输入密码。

   3)Hadoop运行

     格式化 $bin/hadoop namenode -format

     启动   $bin/start-all.sh

     查看   $jps (执行成功后将在本机上启动NameNode、DataNode、JobTracker、TaskTracker和Secondary NameNode五个新的Java进程)

     停止   $bin/stop-all.sh


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值