虚拟环境下搭建hadoop之三——启动hadoop并简单实验

本文档详述了在虚拟机环境下搭建Hadoop的步骤,包括格式化HDFS、启动Hadoop集群、验证运行状态、通过网页查看集群以及进行单词统计实验。实验涉及CentOS6.7、JDK7和Hadoop1.0.0,通过jps命令和Hadoop dfsadmin -report检查集群状态,使用hadoop-example-1.0.0.jar进行大数据量文本单词统计。
摘要由CSDN通过智能技术生成

这是本人初学搭建hadoop的配置步骤,比较适合新手参考,高手可帮忙矫正此文,不甚感激。

实验环境说明:使用的虚拟机软件是VMware Workstation 12 Pro
虚拟机操作系统版本是CentOS6.7
JDK版本是jdk-7u79-linux-x64.rpm
hadoop版本是hadoop-1.0.0.tar.gz
(如果需要以上文件,可留言与本人联系)
【以下编号接上一篇博客】

7 验证配置
7.1 格式化HDFS文件系统
只需要在安装完成时格式化一次即可,以后不用再格式化。格式化命令如下:
这里写图片描述
这里需要注意运行命令的路径。如果运行时提示找不到命令,可以尝试使用”bin/Hadoop namenode -format”命令。

7.2 启动hadoop
在启动之前最好先关闭防火墙,命令如下:
这里写图片描述
使用”start-all.sh”命令启动hadoop,启动结果如下:
这里写图片描述
启动 hadoop成功后,在master 中的 tmp 文件夹中生成了 dfs 文件夹,在slave1和salve2 中的 tmp 文件夹中均生成了 dfs 文件夹和 mapred 文件夹。如下图所示:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值