![](https://img-blog.csdnimg.cn/2019091813595558.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Spark
文章平均质量分 93
Spark
wux_labs
这个作者很懒,什么都没留下…
展开
-
Spark安装环境准备
安装Spark集群之前,需要准备一些基础环境,包括Linux操作系统、Java环境、Python环境、Spark安装包、Hadoop安装包原创 2022-12-09 11:41:24 · 1469 阅读 · 0 评论 -
Spark本地模式安装
Spark本地模式即单机模式,以一个独立的进程,通过其内部的多个线程来模拟整个Spark运行时环境,本地模式只需要在1台服务器上安装Spark即可。本地模式的安装非常简单,只需要将下载的Spark软件安装包解压到目标位置即安装完成。原创 2022-12-12 16:00:13 · 1208 阅读 · 1 评论 -
Spark独立集群安装
Spark独立集群的安装,至少需要3台服务器,在安装Spark之前准备好3台服务器,服务器的主机名及IP地址分别是:node1(10.0.0.5)、node2(10.0.0.6)、node3(10.0.0.7),每台服务器都需要按统一规划安装好Java、Python、Spark软件包。原创 2022-12-14 17:30:19 · 826 阅读 · 0 评论 -
安装Hadoop集群
Spark3.3.1的安装软件包是基于Hadoop3.3+的,为了保持兼容性,这里选择使用Hadoop3.3版本。原创 2022-12-15 18:10:49 · 218 阅读 · 0 评论