hadoop群起集群并测试_hadoop集群如何测试

(3) 检查启动情况(HADOOP)

jps检查

hadoop102:​

hadoop103:

hadoop104:

Web端查看HDFS的NameNode

(a)浏览器中输入:http://hadoop102:9870

(b)查看HDFS上存储的数据信息

(4)启动YARN(Hadoop103)

(5)检查启动情况(YARN)

集群启动完毕!!!

Web端查看YARN的ResourceManager

(a)浏览器中输入:http://hadoop103:8088

(b)查看YARN上运行的Job信息

二.集群测试

1.上传文件到集群

Namenode在安全模式:

检查是否在安全模式  : hdfs dfsadmin -safemode get

如果输出结果为Safe mode is ON,则表示NameNode当前处于安全模式。

离开安全模式 :  hdfs dfsadmin -safemode leave

小文件:

创建文件夹wcinput

​​​​可在web页面中查看   

把本地文件word.txt传到创建的文件夹中                                       

在web页面中查看

2.文件存放位置

[atguigu@hadoop102 subdir0]$ pwd

/opt/module/hadoop-3.1.3/data/dfs/data/current/BP-1436128598-192.168.10.102-1610603650062/current/finalized/subdir0/subdir0

在core-site.xml中:

hadoop.tmp.dir

/opt/module/hadoop-3.1.3/data

是作为文件的存储位置

3.执行计算任务

wodcount是计算指令,该命令的意思是统计wcinput文件中的词频并将结果存到                     wcouput中。

可以查看到历史记录

查看结果

img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上软件测试知识点,真正体系化!

[外链图片转存中…(img-UghXTidx-1719225845326)]
[外链图片转存中…(img-uE4GRP4P-1719225845326)]

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上软件测试知识点,真正体系化!

  • 23
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值