![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
山月兰华
好好学习,天天向上;
好好学习,早点成才。
展开
-
Linux下用Eclipse开发调试Hadoop程序后打jar包后,到Hadoop集群上运行
Linux系统(Ubuntu14.10)下Hadoop开发环境搭建 下载Eclipse,解压安装,下载hadoop-eclipse-plugin-2.5.1.jar插件,放至/eclipse/plugins/目录下。创建hadoop连接。这样就可以用eclipse编写Hadoop程序,调试正确后,就可以打成jar包,提交到Hadoop分布式集群中运行。注意,在Eclipse中运行程序,并没有提交原创 2015-05-21 14:33:49 · 1932 阅读 · 0 评论 -
MapReduce程序提示在MapTask或ReduceTask处,Error: java.lang.NullPointerException
问题 解决 这是由于找不到设置的自定义的Mapper或Reducer类的缘故。两种解决方式:一,将自定义的Mapper或Reducer类写到主类的.java文件中;二,自定义的Mapper或Reducer类不要定义成public类型的。原创 2015-05-30 13:33:28 · 324 阅读 · 0 评论 -
Hadoop-2.5.1集群环境搭建
新建目录,在这个目录下安装自己的jdk和hadoopJDK安装 这个很简单,官网下载jdk到自己的用户目录下,解压配置环境变量,设为系统默认的jdk。 Hadoop-2.5.1的安装 下载官方安装文件,解压到自己的安装目录,先按本地模式安装,在按伪分布模式建立和修改配置文件。全分布配置,需要的配置如下: core-site.xml<configuration> <property原创 2015-06-03 23:37:49 · 1099 阅读 · 0 评论 -
Eclipse编写Hadoop程序,无法查看源码,提示Source not found的解决
下载Hadoop-2.5.1-src.tar.gz,解压到任意目录/home/tangm/workspace进入/home/tangm/workspace/hadoop-2.5.1-src/hadoop-maven-plugins,执行:mvn install返回上级目录/home/tangm/workspace/hadoop-2.5.1-src,执行:mvn eclipse:eclipse -原创 2015-05-23 19:44:01 · 1384 阅读 · 2 评论 -
Hadoop运行jar包,提示ClassNotFoundException
问题 原因 下面这句代码一定要写:job.setJarByClass(getClass());原创 2015-05-25 16:34:50 · 2356 阅读 · 1 评论