spark yarn 提交_spark on yarn提交任务时一直显示ACCEPTED

spark on yarn提交任务时一直显示ACCEPTED，过一个小时后就会出现任务失败，但在提交时shell终端显示的日志并没有报错，logs文件夹中也没有日志产生。注：spark on yarn是不需要启动spark集群的，只需要在提交任务的机器配置spark就可以了，因为任务是由hadoop来执行的，spark只负责任务的提交。

任务提交命令为

bin/spark-submit --class org.apache.spark.examples.JavaWordCount\

--master yarn-client \

--num-executors 25 \

--executor-memory 1g \

--executor-cores 1 \

lib/spark-examples-1.0.1-hadoop2.2.0.jar \

hdfs://192.168.1.11:9000/test

spark-env.sh配置如下：

export SPARK_JAR=hdfs://192.168.1.11:9000/test1/spark-assembly-1.0.1-hadoop2.2.0.jar

export SPARK_YARN_APP_JAR=hdfs://192.168.1.11:9000/test1/spark-examples-1.0.1-hadoop2.2.0.jar

export HADOOP_CONF_DIR=/hadoop/etc/hadoop

export SPARK_EXECUTOR_INSTANCES=1000

export SPARK_EXECUTOR_CORES=1

export SPARK_EXECUTOR_MEMORY=10000M