centos7 (阿里云、linux) 单机spark的安装与配置详解(jdk安装与配置,scala安装与配置,hadoop安装与配置,spark安装与配置)

最新推荐文章于 2023-02-15 09:31:22 发布

luqin_

最新推荐文章于 2023-02-15 09:31:22 发布

阅读量558

点赞数

分类专栏：学习文章标签： spark scala jdk

本文链接：https://blog.csdn.net/Lq_520/article/details/85318334

版权

本文详细介绍了在CentOS7上通过yum更新后，如何一步步安装和配置JDK、Scala以及Spark。包括JDK的安装与环境变量配置，Scala的解压与lib文件夹移动，Spark的解压及启动验证，确保Spark成功运行并计算了π值。

摘要由CSDN通过智能技术生成

centos7 单机spark的安装与配置详解

yum upgrade

saprk的安装需要安装jdk、scala、spark

安装

 sudo yum install java-1.8.0-openjdk-devel.x86_64

配置

我们需找到jdk文件路径

命令：

rpm -ql java-1.8.0-openjdk-devel-1.8.0.191.b12-1.el7_6.x86_64

在这里插入图片描述

打开配置文件

vim /etc/profile

进行环境变量配置（文件路径要自己进行查看路径是否正确）

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.191.b12-1.el7_6.x86_64
export JRE_HOME=$JAVA_HOME/jre
export PATH=$PATH:$JAVA_HOME/bin

环境变量生效

source /etc/profile

安装

wget http://www.scala-lang.org/file

关注

专栏目录