spark集群安装

本文详细介绍了Spark集群的安装步骤,包括Scala的安装、Spark的下载与解压、环境变量配置,以及启动过程中的问题排查。在安装过程中,遇到由于环境变量配置文件格式错误导致的启动失败问题,通过仔细检查和修正,最终成功启动了Spark集群。
摘要由CSDN通过智能技术生成

一、Scala

1、scala安装:http://www.scala-lang.org/download/2.10.6.html

2、解压: tar -zxvf /home/tools/scala-2.10.6.tgz -C /home/softwares/

3、配置环境变量:vi /etc/profile

export SCALA_HOME=/home/softwares/scala-2.10.6

export PATH=$PATH:$JAVA_HOME/bin:$SCALA_HOME/bin

Source /etc/profile

输入scala 测试是否安装成功

二、SPARK

1、下载spark-1.6.2

http://mirror.bit.edu.cn/apache/spark/spark-1.6.0/

解压:tar -zxvf /home/tools/spark-1.6.2-bin-hadoop2.6.tgz -C /home/softwares/

2、环境变量:

export SCALA_HOME=/home/softwares/scala-2.10.6

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值