Hadoop安装过程

以hadoop1.2.1为例

一、安装jdk

二、安装hadoop

1、解压到/usr/local/hadoop

2.配置文件

（1）伪分布式

a.  hadoop-env.sh

   配置JAVA_PATH:export JAVA_PATH = /usr/local/hadoop/

b.hdfs-site.xml

< configuration >     <property>           < name >dfs.data.dir</ name >           < value >/usr/local/hadoop-1.2.1/data</ value >    </ property >       < property >           < name >dfs.replication</ name >           < value >1</ value >       </ property > </ configuration > dfs.data.dir:数据节点存储块的目录列表。 dfs.replication:数据块备份的份数。

c.mapred-core.xml

< configuration >       < property >           < name >mapred.job.tracker</ name >           < value >localhost:9001</ value >       </ property > </ configuration > mapred.job.tracker：作业跟踪器的位置

d.core-site.xml

< configuration >       < property >           < name >fs.default.name</ name >           < value >hdfs://localhost:9000</ value >       </ property > </ configuration > fs.default.name NameNode的IP地址和端口

（2）单机模式

（3）完全分布式模式

三、配置SSH客户端不需要输入密码登陆  cd ~

  生成公私钥对：ssh-keygen -t rsa
公钥-./ssh/id_rsa.pub

私钥-./ssh/id_rsa

用其中一个加密，用另一个解密

将公钥加到authorized_keys中：

 cp id_rsa.pub authorized_keys

以后有用户用公钥远程登陆系统，如果authorized_keys中记录了该公钥，则该用户可以免密码登陆。
四、格式化hdfs

bin/hadoop namenode -format

五、启动/关闭hadoop

bin/start-all.sh

bin/stop-all.sh

 六、通过浏览器来查看hadoop的命名节点(NameNode)和作业追踪器(JobTracker）

NameNode - http://localhost:50070/

JobTracker - http://localhost:50030/