Spark基础之--启动local与standalone模式

我们得到编译好的spark压缩包之后，进行解压；随后进入spark文件夹，获取到spark的路径：

/home/xxx/app/spark-2.1.0-bin-2.6.0-cdh5.7.0

为了后续使用方便，我建议将spark的路径添加到本地配置（~/.bash_profile）

export SPARK_HOME=/home/xxx/app/spark-2.1.0-bin-2.6.0-cdh5.7.0
export PATH=$SPARK_HOME/bin:$PATH

然后使配置文件生效

source ~/.bash_profile

再后直接打开spark即可进入spark的local模式

spark-shell --master local[2]

spark-shell   是“spark-2.1.0-bin-2.6.0-cdh5.7.0/bin”目录下的命令
--master      表示启动
local[x]      表示本地启动x个进程

进入后结果如下：

且可以通过web界面进行查看

ht