- 博客(5)
- 资源 (57)
- 收藏
- 关注
原创 解决Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/fs/ FSDataInputStream
我们将 Hadoop 的 classhpath 信息添加到 CLASSPATH 变量中,在 ~/.bashrc 中增加如下几行:export HADOOP_HOME=/home/hadoop/app/hadoopexport JAVA_HOME=/home/hadoop/app/java/jdkexportSCALA_HOME=/home/hadoop/app/scalaexp
2016-04-19 21:28:58 33684 2
原创 hadoop解决Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/util/Apps
linux+eclipse+本地执行WordCount抛出下面异常:Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/util/Apps。解决:没有把yarn下的包以及yarn 下的lib目录下的包导入
2016-04-18 18:38:08 26503 2
原创 使用命令行编译打包运行自己的MapReduce程序 Hadoop2.7.2
网上的 MapReduce WordCount 教程对于如何编译 WordCount.java 几乎是一笔带过… 而有写到的,大多又是 0.20 等旧版本版本的做法,即 javac -classpath /usr/local/hadoop/hadoop-1.0.1/hadoop-core-1.0.1.jar WordCount.java,但较新的 2.X 版本中,已经没有 hadoop-cor
2016-04-16 13:40:13 3682
原创 RPC小例子解决Exception in thread "main" java.lang.reflect.UndeclaredThrowableException
首先服务端和客户端都需要导入hadoop包内的/common下的三个jar,以及/common/lib与/sources(否则报log4j warn)下所有依赖包。然后服务端和客户端所在包(就是项目内路径)必须一致,否则会出现如下错误。Exception in thread "main" java.lang.reflect.UndeclaredThrowableException a
2016-04-13 14:08:27 8322
转载 Hadoop RPC机制
转自:http://blog.sina.com.cn/s/blog_4438ac090101q8iy.html一、什么是RPC?(1)Remote Procdure call ,远程方法调用,它允许一台计算机程序远程调用另外一台计算机的子程序,而不用去关心底层的网络通信细节,对我们来说是透明的。经常用于分布式网络通信中。(2)Hadoop的进程间交互都死通过RPC来进行的,比如
2016-04-12 19:45:42 335
Spring+SpringMVC+Mybatis框架整合例子(SSM)
2016-04-27
java链接hive需要的jar
2016-07-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人