hadoop wordcount demo 编译、打包、运行(自己的经历)

本文详细记录了如何在CentOS环境下,将Hadoop自带的WordCount示例源码打包成jar文件,并进行编译、运行的过程。首先介绍了使用jd-gui工具反编译jar以查看源码,接着讲解了新建WordCount.java文件、设置javac编译类路径的步骤,以及如何创建测试数据、上传到HDFS。最后,运行jar文件并查看结果。
摘要由CSDN通过智能技术生成

      hadoop原理大家都已烂熟于心,不介绍了,这里记录一下在将wordcount源码打包为jar过程中的步骤。便于自己后续查看也为需要的童鞋提供方便。

其实在hadoop目录下已有许多jar包的demo,可以直接通过命令haoop jar *.jar 运行,如果想查看其源码,最简单的方法是将jar文件考本到windows平台上,用jd-gui进行反编译(比较好用,将jar包拖进去就能反编译为.java文件),下载地址,http://jd.benow.ca/,这样对于学习理解hadoop自带的demo有很大的帮助。

下面以hadoop-2.4.0目录下的(/usr/local/hadoop-2.4.0/share/hadoop/mapreduce/sources)例子说明:

使用此目录下的jar文件。

反编译结果为(当然网上也能找到源码~~~)

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值