本文详细介绍了如何在本地和Linux环境下搭建Spark，包括前期准备、本地安装、基于Hadoop的伪分布式搭建步骤，以及启动和配置过程中可能遇到的问题及解决方案。通过这篇文章，读者可以了解到Spark与Hadoop的版本匹配、环境变量配置、启动命令以及解决权限和路径问题的方法。
title: Spark本地安装及Linux下伪分布式搭建
date: 2018-12-01 12:34:35
tags: Spark
categories: 大数据
toc: true
个人github博客：Josonlee’s Blog
前期准备
spark可以在Linux上搭建，也能不安装hadoop直接在Windows上搭建单机版本。首先是从官网上下载和你hadoop版本匹配的spark版本（版本不要太新，选择稳定版本，如我的是hadoop2.6版本对应spark-2.0.2-bin-hadoop2.6.tgz）
可以放心的是，spark安装远比hadoop安装简单的多
本地安装
把下载的压缩包解压到本地某个位置上，修改环境变量，添加%SPARK_HOME%:解压的位置；修改Path，增加一栏%SPARK_HOME%/bin
</
最低0.47元/天 解锁文章
647
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
