关于Hadoop2.7.2运行wordcount

1.每次机器重启后需要重新format否则namenode无法启动的问题,解决办法就是修改core-site.xml,在你的hadoop安装目录添加临时文件夹。

<property>
          <name>hadoop.tmp.dir</name>
          <value>/usr/local/hadoophome/hadoop_tmp</value>
</property>


2.新建HDFS输入文件夹input2。

bin/hadoop fs -mkdir /input2


3.将本地文件添加到HDFS系统的输入文件夹input2里。

bin/hadoop fs -put README.txt /input2


4.HDFS分布式文件系统实际上并不能在机器上找到相应的文件夹位置。你可以通过fs命令查看文件目录。

bin/hadoop fs -ls / 或者是具体某个文件路径 bin/hadoop fs -ls /input2


5.同样你也可以查看某个文件的内容。

bin/hadoop fs -cat /input2/README.txt


6.运行wordcount,将结果输出到output2中

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount /input2 /output2


7.也可以删除HDFS的文件。

bin/hadoop fs -rmr /input2


8.注意每次运行前都必须清除你的输出文件夹如“output2”


9.查看结果

bin/hadoop fs -cat /output2/*


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值