Spark
文章平均质量分 82
Spark基础
Toozky
这个作者很懒,什么都没留下…
展开
-
Spark[03]spark-shell、IDEA测试SparkSQL
Spark[03]spark-shell、IDEA测试sparksql原创 2021-06-18 11:44:15 · 378 阅读 · 0 评论 -
Spark[02]IDEA提交WordCount程序到spark集群
Spark[02]IDEA提交wordcount程序到spark集群原创 2021-06-18 10:01:24 · 306 阅读 · 0 评论 -
Spark[00]IDEA添加scala环境
spark[00]IDEA添加scala环境 安装scala插件 以IDEA2020.2为例 创建普通Maven项目 File→Settings→Plugins→Marketplace 在搜索框输入scala,点击Install,安装完毕后重启IDEA 添加Scala SDK File→Project Structure→Global Libraries或Libraries 点击+号→Scala SDK→Download 选择Version:2.11.12→点击OK 后续再添加时,选择Location为M原创 2021-06-17 22:22:21 · 288 阅读 · 0 评论 -
Spark[01]Spark集群安装以及配置
Spark[01]Spark集群安装以及配置 目录Spark[01]Spark集群安装以及配置准备环境Hadoop2.0虚拟机①、②、③虚拟机①、②、③资源列表一、spark集群配置解压spark虚拟机①修改配置slaves虚拟机①spark-env.sh虚拟机①profile虚拟机①发送相关文件到②、③虚拟机①虚拟机②、③启动顺序虚拟机①、②、③虚拟机①关闭顺序虚拟机①虚拟机①、②、③测试运行计算PI程序本地模式(local)虚拟机①集群模式(standalone)虚拟机①二、配置历史服务准备环境虚拟机①原创 2021-06-17 21:52:36 · 308 阅读 · 0 评论