java.lang.RuntimeException: java.lang.ClassNotFoundException

15/04/22 15:01:50 INFO mapred.JobClient: Running job: job_201504211850_0019
15/04/22 15:01:51 INFO mapred.JobClient:  map 0% reduce 0%
15/04/22 15:02:06 INFO mapred.JobClient: Task Id : attempt_201504211850_0019_m_000000_0, Status : FAILED
java.lang.RuntimeException: java.lang.ClassNotFoundException: myback.Testmapreduce$testMap
at org.apache.hadoop.conf.Configuration.getClass(Configuration.java:867)
at org.apache.hadoop.mapreduce.JobContext.getMapperClass(JobContext.java:199)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:719)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:370)
at org.apache.hadoop.mapred.Child$4.run(Child.java:255)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:396)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1121)
at org.apache.hadoop.mapred.Child.main(Child.java:249)
Caused by: java.lang.ClassNotFoundException: myback.Testmapreduce$testMap
at java.net.URLClassLoader$1.run(URLClassLoader.java:202)
at java.security.AccessController.doPrivileged(Native Method)
at java.net.URLClassLoader.findClass(URLClassLoader.java:190)
at java.lang.ClassLoader.loadClass(ClassLoader.java:306)
at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:301)
at java.lang.ClassLoader.loadClass(ClassLoader.java:247)
at java.lang.Class.forName0(Native Method)
at java.lang.Class.forName(Class.java:247)
at org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:820)
at org.apache.hadoop.conf.Configuration.getClass(Configuration.java:865)

... 8 more

通过阅读以上错误,我们发现主要是自己定义的testmap类寻找不到,这是为什么?

首先,我们是在windows下通过Eclipse连接Linux下的Hadoop,当选择将程序运行在Hadoop的时候,虽然本工程下有testmap类,但是run on Hadoop的时候,由于配置环境中没有testmap这个类,故而寻找不到。

解决办法是将工程达成jar包,加入到配置环境中。运行就不会再出现以上错误了。

15/04/22 15:11:10 WARN snappy.LoadSnappy: Snappy native library not loaded
15/04/22 15:11:10 INFO mapred.JobClient: Running job: job_201504211850_0020
15/04/22 15:11:11 INFO mapred.JobClient:  map 0% reduce 0%
15/04/22 15:11:35 INFO mapred.JobClient:  map 100% reduce 0%
15/04/22 15:11:51 INFO mapred.JobClient:  map 100% reduce 100%
15/04/22 15:11:56 INFO mapred.JobClient: Job complete: job_201504211850_0020
15/04/22 15:11:56 INFO mapred.JobClient: Counters: 29
15/04/22 15:11:56 INFO mapred.JobClient:   Job Counters 
15/04/22 15:11:56 INFO mapred.JobClient:     Launched reduce tasks=1
15/04/22 15:11:56 INFO mapred.JobClient:     SLOTS_MILLIS_MAPS=21618
15/04/22 15:11:56 INFO mapred.JobClient:     Total time spent by all reduces waiting after reserving slots (ms)=0
15/04/22 15:11:56 INFO mapred.JobClient:     Total time spent by all maps waiting after reserving slots (ms)=0
15/04/22 15:11:56 INFO mapred.JobClient:     Launched map tasks=1
15/04/22 15:11:56 INFO mapred.JobClient:     Data-local map tasks=1
15/04/22 15:11:56 INFO mapred.JobClient:     SLOTS_MILLIS_REDUCES=15858
15/04/22 15:11:56 INFO mapred.JobClient:   File Output Format Counters 
15/04/22 15:11:56 INFO mapred.JobClient:     Bytes Written=71
15/04/22 15:11:56 INFO mapred.JobClient:   FileSystemCounters
15/04/22 15:11:56 INFO mapred.JobClient:     FILE_BYTES_READ=116
15/04/22 15:11:56 INFO mapred.JobClient:     HDFS_BYTES_READ=184
15/04/22 15:11:56 INFO mapred.JobClient:     FILE_BYTES_WRITTEN=43503
15/04/22 15:11:56 INFO mapred.JobClient:     HDFS_BYTES_WRITTEN=71
15/04/22 15:11:56 INFO mapred.JobClient:   File Input Format Counters 
15/04/22 15:11:56 INFO mapred.JobClient:     Bytes Read=78
15/04/22 15:11:56 INFO mapred.JobClient:   Map-Reduce Framework
15/04/22 15:11:56 INFO mapred.JobClient:     Map output materialized bytes=116
15/04/22 15:11:56 INFO mapred.JobClient:     Map input records=5
15/04/22 15:11:56 INFO mapred.JobClient:     Reduce shuffle bytes=116
15/04/22 15:11:56 INFO mapred.JobClient:     Spilled Records=10
15/04/22 15:11:56 INFO mapred.JobClient:     Map output bytes=100
15/04/22 15:11:56 INFO mapred.JobClient:     CPU time spent (ms)=3730
15/04/22 15:11:56 INFO mapred.JobClient:     Total committed heap usage (bytes)=131796992
15/04/22 15:11:56 INFO mapred.JobClient:     Combine input records=0
15/04/22 15:11:56 INFO mapred.JobClient:     SPLIT_RAW_BYTES=106
15/04/22 15:11:56 INFO mapred.JobClient:     Reduce input records=5
15/04/22 15:11:56 INFO mapred.JobClient:     Reduce input groups=1
15/04/22 15:11:56 INFO mapred.JobClient:     Combine output records=0
15/04/22 15:11:56 INFO mapred.JobClient:     Physical memory (bytes) snapshot=182493184
15/04/22 15:11:56 INFO mapred.JobClient:     Reduce output records=5
15/04/22 15:11:56 INFO mapred.JobClient:     Virtual memory (bytes) snapshot=747270144
15/04/22 15:11:56 INFO mapred.JobClient:     Map output records=5

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
根据提供的引用内容,你遇到了一个运行时异常:Caused by: java.lang.RuntimeException: java.lang.ClassNotFoundException: Cannot find implementation。这个异常通常是由于找不到某个类的实现导致的。解决这个问题的方法有以下几种: 1. 检查依赖项:首先,确保你的项目中包含了所需的依赖项。在Android开发中,你可以在项目的build.gradle文件中添加所需的依赖项。例如,如果你使用的是Gradle构建工具,你可以在dependencies部分添加所需的库。然后,重新构建你的项目并运行它。 2. 检查类路径:如果你确定依赖项已经正确添加到项目中,那么可能是类路径的问题。类路径是指Java虚拟机(JVM)用来查找类文件的路径。确保你的类路径包含了所需的类文件。你可以通过在命令行中使用java命令的-cp选项来指定类路径。例如,如果你的类文件位于一个名为lib的文件夹中,你可以使用以下命令来运行你的应用程序: ```shell java -cp lib/ YourMainClass ``` 3. 检查类名和包名:如果你确定依赖项和类路径都没有问题,那么可能是类名或包名的问题。确保你在代码中正确引用了类名和包名。检查你的import语句和类的全限定名是否正确。 4. 清除缓存和重新构建:有时候,清除构建缓存并重新构建项目可以解决一些奇怪的问题。你可以尝试清除你的项目的构建缓存,并重新构建它。 5. 检查编译版本:如果你在使用某个库或框架时遇到了这个问题,确保你的编译版本与该库或框架的要求相匹配。有时候,不同的库或框架需要特定的编译版本才能正常工作。 这些是解决Caused by: java.lang.ClassNotFoundException: Cannot find implementation异常的一些常见方法。根据你的具体情况,你可以尝试其中的一种或多种方法来解决问题。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值