hadoop分布式搭建

namenode ,datanode同台机器启动(伪分布式 练手)

进到hadoop文件里面
在这里插入图片描述

在这里插入图片描述
在标签 里面插入

<property>
  <name>fs.defaultFS</name>
  <value>file://虚拟机的主机名:9000</value>
  <description>The name of the default file system.  A URI whose
  scheme and authority determine the FileSystem implementation.  The
  uri's scheme determines the config property (fs.SCHEME.impl) naming
  the FileSystem implementation class.  The uri's authority is used to
  determine the host, port, etc. for a filesystem.</description>
</property>

在这里插入图片描述

修改储存位置
在这里插入图片描述

<property>
  <name>hadoop.tmp.dir</name>
  <value>/opt/module/hadoop-2.7.2/data/nn</value>
  <description>A base for other temporary directories.</description>
</property>

在这里插入图片描述

起进程之前 ,首次使用要格式化
在这里插入图片描述
启动NN进程:hadoop-daemon.sh start namenode
启动DN进程:hadoop-daemon.sh start datanode
查看进程:jps
在这里插入图片描述

多台虚拟机分布式搭建:

1 进到配置文件
在这里插入图片描述
修改:记住看好自己主机名
在这里插入图片描述

2 修改 hdfs-site.xml
在这里插入图片描述
里边没配置东西,退了

3 修改yarn-site.xml
在这里插入图片描述
配置自己的主机名
在这里插入图片描述
4 修改mapred-site.xml
在这里插入图片描述
5. 改完后分发到其他虚拟机
6在这里插入图片描述

示例成功: 在这里插入图片描述
7 开始启动
7.1 第一台启动 namenode 服务,首次都要格式化
在这里插入图片描述
启动:
在这里插入图片描述
7.2 在用批量处理的机子上,群起datanode
在这里插入图片描述
查看成功否:
在这里插入图片描述
ps:windown系统查看要映射hosts文件
在这里插入图片描述
在这里插入图片描述
C:\Windows\System32\drivers\etc 文件地址

重启yarn
在这里插入图片描述
批量起resourcemanager
在这里插入图片描述
成功如下:
在这里插入图片描述
在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值