![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 82
黄晓萌
新一代分布式任务调度Schedulerx2.0的发起者
展开
-
借助hadoop streaming,使用C++编写MapReduce程序
#g++ Mapper.cpp -o Mapper#g++ Reducer.cpp -o Reducerhadoop streaming是一个hadoop的工具,可以使用户使用其他语言编写mapreduce程序,用户只需要提供Mapper和Reducer,就可以执行Map/Reduce作业相关资料请看hadoop streaming官方文档1、下面以实现WordCount为例原创 2013-09-16 14:29:29 · 1844 阅读 · 0 评论 -
Linux下使用eclipse调试hadoop程序
1、准备工作首先下载一个hadoop的稳定版本,我使用的是hadoop-1.1.2下载jdk1.6下载ant,我使用的是apache-ant-1.9.2安装eclipse2、创建hadoop工程,修改配置解压hadoop-1.1.2.tar到一个指定文件夹新建一个java project,选择hadoop-1.1.2文件夹即可修改conf文件夹下几个xml的原创 2013-09-10 15:31:53 · 1075 阅读 · 0 评论