mapreduce
福气少侠
这个作者很懒,什么都没留下…
展开
-
【MapReduce】Streaming Job Failed!
报错发生情况:用Python写好了一个MR程序,使用Linux环境本地测试正常。 在Hadoop环境上测试就报错。我的环境:$hadoop version Hadoop 2.5.2 ...执行指令:hadoop jar $HADOOP_INSTALL_HOME/contrib/streaming/hadoop-*streaming*.jar -file ./mapper.py -mapper原创 2017-04-13 16:15:50 · 4246 阅读 · 2 评论 -
【Bug记录】Hadoop的WordCount结果不合并,不累加
Bug的背景初学MR程序,一定是从WordCount开始的,跟着敲一遍,发现hadoop执行WordCount后,不对结果进行累加,这是怎么一回事呢?Bug源码package mr;import java.io.IOException; import java.util.StringTokenizer;import org.apache.hadoop.io.Text; import org.apac原创 2017-12-25 17:17:06 · 859 阅读 · 1 评论