关于运行hadoop的wordcount实例

最近在Ubuntu中装了hadoop,用于自己的学习,下面记录我运行第一个的实例wordcount

#创建一个目录,用于输入

mkdir input

echo "hello world">test1.txt

echo "hello hadoop">test2.txt

#将inpu中的文件 放入到hadoop文件系统中的in目录下

hadoop dfs -put ./input in

#查看in目录

hadoop dfs -ls ./in/*

#下面会列出来in下的文件

...

#运行第一个实例时要位于hadoop根目录下,因为hadoop-examples-1.1.2.jar在根目录下,如果不在的话,会出现一个IO异常

(Error opening job jar : hadoop-examples-1.1.2.jar

Cause by:java.util.zip.ZipException:error in opening zip file

......)

hadoop jar hadoop-example-1.1.2.jar wordcount in out

#然后会出现一堆的信息

看到上图信息就说明计算成功

然后 查看结果

hadoop dfs -cat ./out/*

#结果

hadoop 1

hello 2

world 1


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值