Spark
吃冰淇淋
这个作者很懒,什么都没留下…
展开
-
Spark集群分布式环境安装配置
单机版的配置我的另一篇博客有单独描述,附上链接: https://blog.csdn.net/weixin_43729499/article/details/103857948 1、在集群单机版的配置基础上,配置分布式环境 增加以下配置信息: ①、vim spark-env.sh export SPARK_MASTER_HOST=Master的节点信息 ②、vim slaves Slaves 节点...原创 2020-01-06 15:47:04 · 197 阅读 · 0 评论 -
Spark集群单机版安装配置
1、下载spark安装包 安装包可以到官网上直接下载,不过速度可能会稍微慢 2、对文件进行解压(tar -zxvf XXX),并移动到指定位置 (移动位置命令:mv XXX YYY XXX就是你的安装包名称,YYY是目的路径) 3、修改配置文件 ①、spark-env.sh可以复制一份由spark安装文件自带的配置文件模板spark-env.sh.template并重命名为spark-env....原创 2020-01-06 15:24:44 · 251 阅读 · 0 评论