一、实验目的: Spark安装与配置
二、实验过程与方法:
1、官网下载Scala和Spark
2、安装Scala
①、将压缩包传输到Linux目录下:
SecureCRT 【File】→【Connect SFTP Session】开启sftp操作,执行命令:
put E:\大数据软件\scala-2.12.8.tgz
②、解压
tar -zxvf scala-2.12.8.tgz -C /opt/module
③、重命名
把scala-2.12.8 重命名为 scala
mvs cala-2.12.8 scala
④、测试
scala -version
⑤、启动:scala
3、安装spark
SecureCRT 【File】→【Connect SFTP Session】开启sftp操作,执行命令:
put E:\大数据软件\spark-2.4.3-bin-hadoop2.7.tgz
②、解压
tar -zxvf spark-2.4.3-bin-hadoop2.7.tgz -C /opt/module
③、把 spark-2.4.3-bin-hadoop2.7 重命名为 spark
mv spark-2.4.3-bin-hadoop2.7 spark
④、配置Scala和spark的环境变量
⑤、启动spark:
实验七 Spark安装与配置
最新推荐文章于 2022-12-21 23:10:02 发布