Hadoop 1.1.2集群搭建

1:分布式结构    主节点(一个Master):NameNode、JobTracker、SecondaryNameNode
                            从节点(两个是:Node1、Node2):DataNode、TaskTracker
2:在各个节点产生加密文件
ssh-keygen -t rsa (跟目录)  并且拷贝到 .ssh目录中去  
 cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys
3:编辑各个节点的  /etc/hosts,在该文件中含有所有节点的ip和hostname的映射信息(在window端访问需要在 C:\Windows\System32\drivers\etc 目录host文件添加ip地址和主机名的映射关系)
4:两两节点之间SSH免密码登录(以Master为主,在master主机上操作)
ssh-copy-id -i Node1
scp /root/.ssh/authorized_keys Node1:/root/.ssh/
5:把Master的hadoop目录下logs和tem文件夹删除
6把Mster中的jdk,hadoop文件夹复制到Node1,Node2节点
scp -r /usr/local/jdk Node1:/usr/local/
7:把Master的/etc/profile 复制到Node1和Node2节点,在目标节点执行source /etc/profile
8:编辑Master的配置文件slaves ,改为从节点hostname,分别是Node1和Node2
9:格式化,在Master节点中执行 hadoop namenode -format
10:启动,在Master节点中执行  start-all.sh
*****注意:对于配置文件core-site.xml和mapred-site.xml在所有节点都是相同的
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值