白手起家：一步一步安装 hadoop on windows

本文的内容仅仅是在windows 的单机环境下安装hadoop，目的自然是对hadoop可以有一个感性的接触和了解。所以正是因为需要阅读此文的肯定是hadoop门外汉，而且一步一步越细致的越好，不要让复杂和挫败感一下子就把你当在门外。真正把hadoop 在多机器的环境下配置起来需要更多的学习，就不是本文的职责了。

一：先准备需要下载的东东：

1：Java Runtime （JRE）1.6 以上，下载最新版本就是了。http://www.java.com/

 值得注意的是安装路径，不要用默认的c:/Program files/Java,此路径中有空格。在hadoop中会出现不必要的麻烦，建议用c:/java。

2：cygwin 环境，如果你还不知道这是什么，google 一下先。然后再来接着看。。。http://www.cygwin.com/

cygwin 的安装有点需要注意的地方。hadoop需要ssh，注意把net包选上。具体可以参考我的另一篇博文：白手起家：一步一步安装cygwin

3：hadoop 包 http://hadoop.apache.org/common/releases.html 下载stable版本，一般是一个.tar.gz文件。建议解压到c:/hadoop。

到目前我们的计算机中多了三个目录：

c:/cygwin

c:/java

c:/hadoop

二：配置

1：设置JAVA_HOME 

打开 c:/hadoop/conf/hadoop-env.sh

找到

#export JAVA_HOME=

 大概在第9行左右。

改成

export JAVA_HOME=c:/java/jre6

2：配置ssh 为无密码

先打开cygwin，在cygwin窗口中启动sshd server：

ssh-host-config -y

等待完成，接着：

cygrunsrv -S sshd

此时已经启动sshd了，然后开始设置ssh。

ssh-keygen -t dsa -P ' -f ~/.ssh/id_dsa

cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

至此，你可以用ssh localhost 看看是否真的不需要密码。

3：配置hadoop

打开c:/hadoop/conf/core-site.xml，改成

<configuration>
  <property>
    <name>fs.default.name</name>
    <value>hdfs://localhost:9000</value>
  </property>
</configuration>

打开c:/hadoop/conf/hdfs-site.xml，改成

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
</configuration>

打开c:/hadoop/conf/hdfs-site.xml，改成

<configuration>
  <property>
    <name>mapred.job.tracker</name>
    <value>localhost:9001</value>
  </property>
</configuration>

3：格式化hadoop

在cygwin 窗口中进入c:/hadoop

bin/hadoop namenode -format

三：启动hadoop

bin/start-all.sh

如果启动成功，可以打开浏览器   http://localhost:50070/ 看看，如果有hadoop的状态页面出来，ok，恭喜你。

四：停止hadoop

bin/stop-all.sh

五：后记

本文就是把我自己安装hadoop的过程做了一个记录，并且避免了一般在初次安装时可能会碰到的问题。