大数据
文章平均质量分 91
塵世星空
2021年新的征程,忘记背后,努力向前。
展开
-
【Spark篇】sparkCore初识-RDD相关
官方文档:http://spark.apache.org/ 第一部分: spark 整体的相关的介绍 一、什么是spark 基于官网的介绍: Apache Spark™ is a fast and general engine for large-scale data processing.【对于处理大规模的数据的快速并且通用的引擎】 Apache Spark is an open ...原创 2018-04-06 19:31:53 · 281 阅读 · 0 评论 -
【spark篇】spark集群基于不同模式下搭建及过程分析
第一部分:基于standalone集群搭建 规划:node01为主节点,node02,node03为从节点。 一、配置项 操作node01: 1.修改conf下的slaves文件 修改localhost为node02和node03 从节点 2.修改spark-env.sh export SPARK_MASTER_IP=node01 export SPARK_MAS...原创 2018-06-07 18:35:00 · 446 阅读 · 0 评论