Windows环境安装spark2.11.2

已于 2024-08-07 16:18:23 修改
阅读量269 收藏
点赞数 3
文章标签： scala
于 2024-08-07 16:16:42 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_47096845/article/details/140994724
版权

Windows环境安装spark2.11.2

JDK安装

  • 下载安装jdk1.8

SCALA安装

  • 下载scala的安装msi包
    https://downloads.lightbend.com/scala/2.11.12/scala-2.11.12.msi
  • 根据图形界面提示完成安装，配置系统环境变量SCALA_HOME,添加PATH.
  • cmd命令输入scala,显示版本信息就表示安装正常

Spark安装

  • 下载spark 2.11.2安装包 https://archive.apache.org/dist/spark/spark-2.4.7/spark-2.4.7-bin-hadoop2.7.tgz
  • 解压安装，配置SPARK_HOME,环境变量PATH
  • cmd命令输入spark-shell,进入ui界面就表示安装成功了
程旭辉
关注
spark安装
weixin_43203897的博客
02-20 324
下载spark安装包 下载地址spark官网：http://spark.apache.org/downloads.html 这里我们使用 spark-2.0.2-bin-hadoop2.7版本. 新建安装目录 /usr/local 解压 tar -zxvf spark-2.0.2-bin-hadoop2.7.tgz 重命名 mv spark-2.0.2-bin-hadoop2.7 ...
pandoc-2.11.2-windows-x86_64.msi
11-30
官方不好下载，我只是搬运工。
spark环境安装
l576754326的博客
01-13 678
第三方教程提供
Spark2.0.2 安装包
02-24
spark安装包，亲测有效。
安装Spark
最新发布
2301_80318750的博客
09-05 268
https://archive.apache.org/dist/spark/ 版本：3.5.0。2.配置环境变量：在任意路径下都能访问到spark软件包中的文件或文件夹。1.修改spark软件包的名字：方便后续访问。二.把软件包上传到对应的虚拟机中的主机上。2） 修改spark-env.sh。#添加hadoop文件所在的路径。三.解压到/opt/module。4.修改spark的配置文件。#添加hadoop环境变量。四.部署spark环境。3.生效环境变量的配置。#添加jdk环境变量。
spark安装包
07-31
该安装包为spark-2.2.0-bin-without-hadoop.tgz.tar。
Windows32或64位下载安装配置Spark
mark_to_win的专栏
05-24 213
Windows 32或64位下载安装配置Spark：1）下载地址：http://spark.apache.org/downloads.html马克-to-win @ 马克java社区：选择需要下载的Spark版本，我选的是当前最新的版本2.2.0。因为我已经安装了Hadoop 2.7.4版本的，所以我选择对应的Pre-built for Hadoop 2.7 and later。注意网站上说sca...
优启通系统U盘制作及Win10系统安装
热门推荐
calm_encode的博客
02-09 2万+
前言 自己手动安装操作系统的方法总结。 准备工作 一：Win10系统下载 MSDN 二：利用PanDownload下载工具快速下载系统文件到本地 1. PanDownload下载安装 2. 使用Pandownload新建离线下载 ...
log4j-api-2.11.2.jar
01-08
log4j-api-2.11.2.jar
nexus-2.11.2-03-bundle.tar.gz
05-09
在本文中，我们将深入探讨“nexus-2.11.2-03-bundle.tar.gz”这一特定版本的Nexus在Linux环境下的安装与使用。 首先，我们来理解一下“bundle”这个词在Nexus上下文中的含义。在Nexus的上下文中，"bundle"通常指的...
Jackson高性能的JSON处理 v2.11.2
09-28
在版本v2.11.2中，Jackson进一步提升了性能，并提供了更丰富的API和特性，以满足开发人员对JSON数据序列化和反序列化的各种需求。 Jackson的核心组件包括三个主要部分：`jackson-databind`、`jackson-core`和`...
Spark安装包、安装文档
05-14
Spark及其安装文档
Spark安装包及部署文档
10-18
资源是Spark 在yarn模式上的部署的spark安装包（spark-2.4.7-bin-hadoop2.7.tgz），以及安装部署的文档
spark 安装所需包1.zip
03-02
本资源包含了spark3.0和Hadoop2.7.1 的安装包。有本人之前在安装的时候下载包找了很久，在此处打包分享。
spark及相关软件对应版本安装包
10-21
该资源包括java jdk，Scala，hadoop，spark以及hadoop缺少的winutils.exe文件，为本人安装过程使用的全部资源，版本都是对应好的，亲测可用，安装过程也可以参考本人博客。
spark的安装包Linux下1.3
05-05
spark1.3Hadoop2.4的Linux下的安装包。Linux下安装可用
nexus 2.11.2linux.zip
11-07
2. **设置环境变量**：根据Nexus的文档，设置必要的环境变量，如`JAVA_HOME`指向Java的安装路径。 3. **配置Nexus**：修改`conf/nexus.properties`文件，根据实际情况调整配置，如端口号、数据存储位置等。 4. **...
【Spark】Windows下安装Spark（亲测成功安装）
tttzzzqqq2018的博客
08-02 1万+
安装Spark之前，需要安装JDK、Hadoop、Scala。显示上面的正常运行界面，表示本地的spark环境已搭建完成！环境变量Path添加条目%SCALA_HOME%\bin。为了验证Scala是否安装成功，开启一个新的cmd窗口。环境变量Path添加条目%SPARK_HOME%\bin。为了验证Spark是否安装成功，开启一个新的cmd窗口。设置环境变量 %SCALA_HOME%设置环境变量 %SPARK_HOME%本地点击msi文件安装，安装目录为。可以看到Scala安装成功。安装方法就不赘述了。
spark安装包_Spark基础：Spark On Yarn（上）
weixin_39634438的博客
11-24 147
1 在Yarn上启动Spark要想使spark运行在yarn上，先决条件是spark启动节点上包含 HADOOP_CONF_DIR 或 YARN_CONF_DIR 环境变量，该变量指向的目录包含了 hdfs、 yarn相关的配置。该目录下的配置文件会分发到YARN集群的每个节点，从而保证每个容器都使用相同的配置。如果配置中包含Spark相关的应用配置，如driver、executor等，会自动添加...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值