- 博客(5)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 HADOOP的学习笔记 （第五期） hadoop示例代码分析
上一期中已经能跑成功一个hadoop程序了。这一期来记录下，还分析下代码内容，我也只是参照。《Hadoop 权威指南》加上我自己的见解来进行分析。 示例代码： public class WordCount { /** * extends Mapper * 其中此4个泛型的含义为k1,v1,k2,v2 * 即：输入map的key与value， * map输出的key与valu
2012-10-28 15:35:28
1585
原创 HADOOP的学习笔记 （第四期） eclipse 执行 wordcount
上一期基本已经搭配好了eclipse hadoop的配置环境，但是肯定会有的朋友说有问题。经过我的测试发现是有一定的问题，但是问题不大，这期首先先把上期遇到的问题解决一下，提出我的解决方案，如果不是我遇到的问题，就需要朋友们自己找解决方案了。 1、第一个问题：环境搭配成功了以后，点击create new directory 无法创建目录。 我发现的原因是，因为我的虚拟机用配置的hado
2012-10-22 22:31:50
2360
1
原创 HADOOP的学习笔记 （第三期） eclipse 配置hadoop开发环境
前两期已经写了一些关于hadoop单机以及分布式的简单配置，下面就要开始写MR程序了。欲善其功必利其器，我们就先完善下工具。还是eclipse，用eclipse配置hadoop的开发 环境。为了这个配置环境我昨天忙了好久，经过不懈努力以及配合百度终于搞定了开发环境。 1.我们首先解压hadoop，我用的版本0.20.205，也正是因为此我付出了巨大的代价。按照一般网上的描述只需要将ha
2012-10-21 15:10:33
1875
转载 hadoop-eclipse开发环境搭建及error: failure to login错误
对于Hadoop开发者来讲，通过JAVA API编程是进入Map-Reduce分布式开发的第一步。由于Eclipse本身并没有提供对MapReduce编程模式的支持，所以需要一些简单的步骤来实现。 1. 安装Hadoop。 本文的Hadoop是部署在虚拟机上的伪分布模式。相关软件环境如下： JDK： sun jdk1.6.0_30 Hadoop: hadoop-0.20.
2012-10-20 23:22:05
1746
原创 HADOOP的学习笔记 （第二期）
前段时间写了hadoop学习笔记第一期，这段时间一直忙，没有时间。今天来写第二期吧。关于全分布模式。 我用的是虚拟的两台机器，环境都是centos 5.5 。 master 192.168.0.150 slaver 192.168.0.152 第一步：首先都按照第一期(http://blog.csdn.net/kobe_lzq/article/details/795816
2012-10-15 22:07:30
982
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人