一修改Spark环境配置文件
1、使用此模式需要修改Spark配置文件
2、存盘退出后,执行命令:source spark-env.sh
,让配置生效
二提交Spark应用到集群运行
1、执行命令:start-dfs.sh
2、 执行命令:start-yarn.sh
三运行Spark应用程序
1、查看Spark应用程序$SPARK_HOME/examples/jars/spark-examples_2.11-2.1.1.jar
一修改Spark环境配置文件
1、使用此模式需要修改Spark配置文件
2、存盘退出后,执行命令:source spark-env.sh
,让配置生效
二提交Spark应用到集群运行
1、执行命令:start-dfs.sh
2、 执行命令:start-yarn.sh
三运行Spark应用程序
1、查看Spark应用程序$SPARK_HOME/examples/jars/spark-examples_2.11-2.1.1.jar