hadoop单机安装要点

今天安装了hadoop的单机版，参照网上的一些博文，终于成功了，环境如下：

Hadoop版本：hadoop-0.20.203.0
Java JDK版本：1.6.0_29
linux环境：suse 9

参照博文：
[url]http://www.cnblogs.com/maczpc/archive/2010/01/17/1650191.html[/url]

在参照上述博文的基础上，还有如下几个要点：

1、检查SSH是否安装，命令如下：
[color=blue] $ssh -version[/color]

2、配置JAVA_HOME，在 conf/hadoop-env.sh 中添加如下内容：
[color=blue] export JAVA_HOME=/opt/jdk1.6.0_29[/color]

3、检查hadoop配置：
conf/core-site.xml内容如下:

...
<configuration>
 <property>     
    <name>fs.default.name</name>     
    <value>hdfs://localhost:9000</value>     
 </property>
</configuration>

hdfs-site.xml内容如下：

...
<configuration>
  <property>     
    <name>dfs.replication</name>     
    <value>1</value>     
  </property>
</configuration>

mapred-site.xml内容如下：

...
<configuration>
  <property>     
    <name>mapred.job.tracker</name>     
    <value>localhost:9001</value>     
  </property>
</configuration>

4、以root方式启动，会遇到问题，提示如下：
[color=red]hadoop Unrecognized option: -jvm[/color]
检查bin/hadoop，发现如下内容：

  if [[ $EUID -eq 0 ]]; then
    HADOOP_OPTS="$HADOOP_OPTS -jvm server $HADOOP_DATANODE_OPTS"
  else
    HADOOP_OPTS="$HADOOP_OPTS -server $HADOOP_DATANODE_OPTS"
  fi

如果是root用户启动，需要传 -jvm参数，不知是何用意，暂时先注掉，如下所示：

  #  if [[ $EUID -eq 0 ]]; then
  #    HADOOP_OPTS="$HADOOP_OPTS -jvm server $HADOOP_DATANODE_OPTS"
  #  else
       HADOOP_OPTS="$HADOOP_OPTS -server $HADOOP_DATANODE_OPTS"
  #  fi

启动正常

5、格式化新的文件系统，启动hadoop
[color=blue]$bin/hadoop namenode –format
$bin/start-all.sh[/color]

6、启动完毕，可以通过如下地址查看启动情况：
NameNode - http://host:50070/
JobTracker - http://host:50030/