Ubuntu18-SPARK集群搭建standalone模式(无hadoop)

Ubuntu18
scala2.11.8
spark2.3.3
ubuntu18.0
jdk1.8
(未安装Hadoop版本)
一.安装jdk:
Ubuntu在/etc/profile配置完jdk每次都要source才能使用java命令(配置永久环境变量):
source /etc/profile配置是会造成上述问题,因而需要下面的操作:
vim ~/.bashrc(vim未安装需要sudo apt install vim 安装一下)进入文档
在文档的最上方添加:
export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_161 (安装jdk的位置)
export PATH=PATH:PATH:PATH:JAVA_HOME/bin
export CLASSPATH=.:JAVA_HOME/lib/dt.jar:JAVA_HOME/lib/dt.jar:JAVA
H

OME/lib/dt.jar:JAVA_HOME/lib/tools.jar
(Esc 保存,:wq推出)
source ~/.bashrc

二.安装scala:
下载好安装包:scala-2.11.8.tgz
mkdir /usr/local/scala(创建安装目录scala)
tar -zxvf ~/下载/scala-2.11.8.tgz -C /usr/local/scala
设置环境变量:
vim ~/.bashrc:
按”i“表示编辑状态,文件最上方添加
export SCALA_HOME=/usr/lib/scala
export PATH=SCALAHOME/bin:{SCALA_HOME}/bin:SCALA
H

OME/bin:PATH
输入后,按 Esc键,然后输入:wq!(表示强制输入内容并退出)
scala -version 验证

三.安装spark:
1安装Spark
创建spark目录mkdir /usr/local/spark,解压 spark-2.3.3-bin-hadoop2.7.tgz
sudo tar -zxvf spark-2.3.3-bin-hadoop2.7.tgz -C /usr/local/spark

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值