Hadoop集群启动后利用Web界面管理HDFS

       Hadoop集群启动后,可以通过自带的浏览器Web界面查看HDFS集群的状态信息,访问IP为NameNode所在服务器的IP地址,hadoop版本为3.0以前访问端口默认为9870hadoop版本为3.0以后访问端口默认为50070。(下面测试版本为Hadoop3.0以后的

一、利用ifconfig命令查看NameNode所在服务器的IP地址

     例如我的NameNode所在服务器的IP地址为192.168.107.131

二、利用虚拟机自带的浏览器打开192.168.107.131:50070

        在浏览器地址栏中输入192.168.107.131:50070或者输入master:50070即可打开HDFS的web界面。点击Overview就可以查看文件系统的基本信息,例如系统启动时间,Hadoop版本号,Hadoop源码编译时间,集群ID等等。在Summary一栏中,我们可以看见HDFS磁盘存储空间,已使用空间,剩余空间等信息。

内容概要:本文介绍了Hadoop分布式系统的基本操作流程及其组件管理和维护方法,特别是针对MapReduce集群的相关操作进行了详细说明。它覆盖了从初始化环境开始,如何正确启动和停止HDFSHadoop Distributed File System)以及YARN (Yet Another Resource Negotiator)服务,并展示了通过命令行将本地文件复制进HDFS存储位置的具体做法;还提到了环境变量设置的重要性与具体的加载方式,最后简述了利用提供的web图形化界面对整个HDFS状态进行监控的方法。这对于理解和掌握大型数据集高效处理的基础架构至关重要。 适用人群:主要面向有意愿深入了解大数据技术和分布式计算平台的技术爱好者和IT从业者,尤其是初学者或者是那些希望深入探究Hadoop内部工作机制的学生或者研究人员。 使用场景及目标:帮助读者快速搭建本地化的简易Hadoop实验环境来测试各种任务流程,如文件读取、传输和查询等功能是否正常运行。对于想要构建更复杂应用的研究项目而言,这些基本概念的理解能够为后续更深层次的学习提供坚实基础。 其他说明:虽然文中给出的例子基于Linux系统命令,但对于Windows或macOS用户的指导仍然有很大帮助价值。同时,随着版本迭代和技术更新,某些路径或者参数设置可能会发生变化,在实际操作前需要查阅最新的官方文档资料。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MI_farmer

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值