大数据环境搭建(六)之安装Spark

最新推荐文章于 2023-01-15 21:54:33 发布

VIP文章「已注销」

最新推荐文章于 2023-01-15 21:54:33 发布

阅读量237

点赞数

分类专栏：大数据与人工智能文章标签： hadoop 大数据 spark

转载注明出处

本文链接：https://blog.csdn.net/qq_15973399/article/details/107342322

版权

下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.0.0/

local 模式

解压

tar -zxvf spark-3.0.0-bin-hadoop3.2.tgz 
mv spark-3.0.0-bin-hadoop3.2 spark-3.0.0

测试安装

bin/spark-submit --class org.apache.spark.examples.SparkPi --executor-memory 1G --total-executor-cores 2 examples/jars/spark-examples_2.12-3.0.0.jar 100

在这里插入图片描述

单机 master-worker

启动master命令

sbin/start-master.sh

UI地址：http://172.18.63.98:8080

最低0.47元/天解锁文章

优惠劵

「已注销」

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
大数据环境搭建(六)之安装Spark

下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.0.0/local 模式解压tar -zxvf spark-3.0.0-bin-hadoop3.2.tgz mv spark-3.0.0-bin-hadoop3.2 spark-3.0.0测试安装bin/spark-submit --class org.apache.spark.examples.SparkPi --executor-memory 1G --total
复制链接

扫一扫