【Ubuntu安装spark环境】----第三站----【spark安装】

Spark在大多数情况下适合Scala连在一起的,因此我们在安装Spark之前不妨先安装Scala

1.安装配置Scala

tar -zxvf scala-2.13.5.tgz -C /usr/scala

配置环境变量

# 打开profile文件
vi /etc/profile

# 配置变量
export SCALA_HOME= /usr/scala/scala-2.13.5
export PATH=$PATH:$SCALA_HOME/bin

在这里插入图片描述
让变量生效

source /etc/profile

测试
在这里插入图片描述
2.安装配置Spark
解压到指定目录

tar -zxvf spark-3.1.1-bin-hadoop2.7.tgz -C /usr/spark

配置环境变量

#打开profile文件
vi /etc/profile

export SPARK_HOME=/usr/spark/spark-3.1.1-bin-hadoop2.7
export PATH=$PATH:$SPARK_HOME/bin

让变量生效

source /etc/profile

测试
启动spark

./bin/spark-shell

在这里插入图片描述
尝试访问spark UI
在这里插入图片描述
![在这里插入图片描述](https://img-blog.csdnimg.cn/20210328081435620.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2VjaG8yNDU=,size_16,color_FFFFFF,t_70
3.尝试spark自带案例
进入到spark/bin

./run-example org.apache.spark.examples.SparkPi

在这里插入图片描述
成功运行计算出pi
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值