4.21 从0开始配置spark-local模式

首先准备好安装包

然后使用命令解压

 

 使用source /etc/profile命令让环境变量生效

输入命令

spark-submit --class org.apache.spark.examples.SparkPi --master local[2] /opt/module/spark-local/examples/jars/spark-examples_2.12-3.1.1.jar 10

即在spark运行了第一个程序

查看运行任务详情

在任务还处于运行状态时，可以通过FanLing001:4040来查看。请注意，一旦任务结束，则这个界面就不可访问了。