5.3 Spark任务提交

• spark-submit提交

编程要求：

        jar包所在位置：/root/project.jar

        主类：Student 提交模式：local

        预期输出：(bj,88)(sh,67)(gz,92)

代码实现：

#!/bin/bash
cp -r  Spark/SparkRDD/target/project.jar /root
cd /opt/spark/dist/bin
#********** Begin **********#
./spark-submit --master local --class Student /root/project.jar
#********** End **********#

• 相关知识：

使用格式：

./bin/spark-submit

--class

--master

--deploy-mode

--conf

... # other options

application-jar

spark-submit参数

参 数	介 绍
--master