前段时间写了hadoop学习笔记第一期,这段时间一直忙,没有时间。今天来写第二期吧。关于全分布模式。
我用的是虚拟的两台机器,环境都是centos 5.5 。
master 192.168.0.150
slaver 192.168.0.152
第一步:首先都按照第一期(http://blog.csdn.net/kobe_lzq/article/details/7958160)的操作做两台单机环境。
第二步:因为master向slaver中放置文件的时候都是通过SSH,所以配置两台机器都需要免密码登陆。配置方式前面也已经讲过,在master中生成的id_rsa.pub scp到slaver中。
第三步:配置host /etc/hosts和主机名
第四步:修改核心的配置文件:core-site.xml,hdfs-site.xml,mapred-site.xml
1.修改core-site.xml
2.修改mapred-site.xml
第五步:在分别修改两台机器中的masters 和 slavers 如图:
第六步:至此,基本就是配置完毕,然后执行下format, start以后用 hadoop dfsadmin -report 看下。