我知道这是一个微不足道的问题,但我在网上找不到答案。
我尝试用程序参数(String []ARGS)运行一个带有主函数的Java类。
但是,当我使用spark submit提交并传递程序参数提交作业时
java -cp .jar
它不读取参数。
我尝试运行的命令是
bin/spark-submit analytics-package.jar --class full.package.name.ClassName 1234 someargument someArgument
这就给了
Error: No main class set in JAR; please specify one with --class
当我尝试的时候:
bin/spark-submit --class full.package.name.ClassName 1234 someargument someArgument analytics-package.jar
我得到
Warning: Local jar /mnt/disk1/spark/1 does not exist, skipping.
java.lang.ClassNotFoundException: com.relcy.analytics.query.QueryAnalytics
at java.net.URLClassLoader.findClass(URLClassLoader.java:381)
at java.lang.ClassLoader.loadClass(ClassLoader.java:424)
at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
at java.lang.Class.forName0(Native Method)
at java.lang.Class.forName(Class.java:348)
at org.apache.spark.util.Utils$.classForName(Utils.scala:176)
at org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:693)
at org.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:183)
at org.apache.spark.deploy.SparkSubmit$.submit(SparkSubmit.scala:208)
at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:122)
at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)
我怎样才能传递这些论点呢?在每次运行作业时,它们都会频繁更改,并且需要作为参数传递。