Giraph 运行常见错误

原创 2016年08月30日 09:13:35

1. Could not find or load main class org.apache.giraph.yarn.GiraphApplicationMaster

16/08/30 08:45:13 ERROR yarn.GiraphYarnClient: Giraph: org.apache.giraph.examples.SimpleShortestPathsComputation reports FAILED state, diagnostics show: Application application_1472465026418_0008 failed 2 times due to AM Container for appattempt_1472465026418_0008_000002 exited with  exitCode: 1 due to: Exception from container-launch: ExitCodeException exitCode=1: 

ExitCodeException exitCode=1: 

at org.apache.hadoop.util.Shell.runCommand(Shell.java:538)

at org.apache.hadoop.util.Shell.run(Shell.java:455)

at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:702)

at org.apache.hadoop.yarn.server.nodemanager.DefaultContainerExecutor.launchContainer(DefaultContainerExecutor.java:195)

at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:300)

at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:81)

at java.util.concurrent.FutureTask.run(FutureTask.java:262)

at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1145)

at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:615)

at java.lang.Thread.run(Thread.java:745)

Container exited with a non-zero exit code 1.Failing this attempt.. Failing the application.

出现该错误时在命令行运行的命令为:

  1. $> hadoop jar /home/giraph/giraph-examples/target/giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.5.2-jar-with-dependencies.jar
  2. org.apache.giraph.GiraphRunner
  3. org.apache.giraph.examples.SimpleShortestPathsComputation -vif
  4. org.apache.giraph.io.formats.JsonLongDoubleFloatDoubleVertexInputFormat
  5. -vip /user/input/tiny_graph.txt -vof
  6. org.apache.giraph.io.formats.IdWithValueTextOutputFormat -op
  7. /user/giraph_output/shortestpaths -w 4 -yj
  8. /home/giraph/giraph-examples/target/giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.5.2-jar-with-dependencies.jar

在网上查到说好像是绝对路径的问题,于是创建软链接试试:

  1. ln -s /home/giraph/giraph-examples/target/giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.5.2-jar-with-dependencies.jar

然后重新运行命令行:

  1. $> hadoop jar giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.5.2-jar-with-dependencies.jar
  2. org.apache.giraph.GiraphRunner
  3. org.apache.giraph.examples.SimpleShortestPathsComputation -vif
  4. org.apache.giraph.io.formats.JsonLongDoubleFloatDoubleVertexInputFormat
  5. -vip /user/input/tiny_graph.txt -vof
  6. org.apache.giraph.io.formats.IdWithValueTextOutputFormat -op
  7. /user/giraph_output/shortestpaths -w 4 -yj
  8. giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.5.2-jar-with-dependencies.jar

发现可以工作了。


版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

运行 Giraph 提示 too many counters

运行 Giraph 提示 too many counters在加入 -ca mapreduce.job.counters.limit=1000 后,仍然运行失败16/10/20 08:56:08 IN...

Giraph 单机及集群上运行任务命令说明

Giraph 单机及集群上运行任务命令说明单机运行 Giraph 任务 在单机运行 Giraph 任务之前,确保已经设置了 HADOOP_CONF_DIR 环境变量的值 命令行输入 $ expor...

安卓开发中常见运行错误的处理方法.txt

安卓开发常见错误处理方案:数据库方面: 创建数据库语法:单词写错会报出 syntax error 的语法错误 String sql...

iis常见问题解决方案(404.3 Not Found;HTTP 错误 500.19 - Internal Server Error;32位无法在64位运行)

1.HTTP 错误 404.3-Not Found。(如上图所示) -----------------------------------------------------------------...

ICE常见编译和运行(异常)错误

在编译和 Ice 应用相关的文件中,经常因为 ice 相关的文件包含关系而导致编译无法通过,此时的错误一般提示和 handle.h 相关。然而想要解决这样的错误,一般只需要把在无法编译成 .o 文件的...
  • Charein
  • Charein
  • 2014年09月30日 17:46
  • 526

Spark程序运行常见错误解决方法以及优化

一.org.apache.spark.shuffle.FetchFailedException 1.问题描述 这种问题一般发生在有大量shuffle操作的时候,task不断的failed,...

Java虚拟机学习笔记(一)——JVM运行时数据区和常见内存错误

本人的“Java虚拟机学习笔记”系列,主要是参考《深入理解Java虚拟机》和《Java虚拟机规范(Java SE 8)》两本书,算是本人的学习笔记,供大家参考,如有问题,烦请指出谢谢! 一、运行时...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Giraph 运行常见错误
举报原因:
原因补充:

(最多只允许输入30个字)