hadoop
文章平均质量分 86
Angela_xiaoli
酷爱数据挖掘
展开
-
Python+hadoop Streaming编写的Map-Reduce程序与调试运行
Hadoop的 Streaming介绍 Hadoop本身是用Java开发的,程序也需要用Java编写,但是通过Hadoop Streaming,可以使 用任意语言(python、ruby、C++等)来编写程序,让Hadoop运行。 Hadoop提供了MapReduce的API,并允许使用非java的其他语言来写自己的map和reduce函数。而Streaming使用Unix原创 2015-03-24 11:56:12 · 2781 阅读 · 0 评论 -
Hadoop2.5.1在Ubuntu14中的伪分布配置+wordcount测试+eclipse环境配置
Hadoop2.5.1在Ubuntu14中的伪分布配置+wordcount测试+eclipse环境配置 一. 安装前须知 系统:Ubuntu14.04(64位) Hadoop安装包:hadoop-2.5.1.tar.gz Java jdk:jdk1.8.5 Eclipse: eclipse-standard-luna-R-linux-gtk-x86_64.tar.gz Eclipse上的hadoop插件:hadoop2x-eclipse-plugin-master.zip原创 2015-01-19 20:25:51 · 1008 阅读 · 0 评论