Spark
qinsur
这个作者很懒,什么都没留下…
展开
-
Spark 常见算子总结
Spark常见的算子) [root@zjw3 ~]# spark-shell Spark context Web UI available at http://zjw3:4040 Spark context available as ‘sc’ (master = local[*], app id = local-1588002167755). Spark session available as ‘spark’. Welcome to ____ __ / / ___ / / \原创 2020-06-02 17:47:06 · 472 阅读 · 0 评论 -
Spark 安装(单机版)
Spark 安装(单机版)解压文件到指定目录修改配置文件重命名到/spark240/conf目录下(1)saprk-env.sh(2)slaves (配置单机的话,则不需要配置)配置环境变量运行Spark (已经安装了 scala)先启动 Hadoop启动 SparkSpark 使用 Python 开发配置python环境安装Python启动PySpark的客户端 注意:安装spark之前要安装jdk,hadoop 解压文件到指定目录 [root@cai install]# tar -zxvf spark-原创 2020-06-01 20:16:40 · 676 阅读 · 0 评论