![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark
sean_spring
这个作者很懒,什么都没留下…
展开
-
SparkCore:RDD-API史上最详细操作
SparkCore:RDD-API史上最详细操作 RDD-API转载 2020-04-26 10:49:47 · 394 阅读 · 0 评论 -
sparkStreaming
目录(sparkStream)本质(是什么)(我在试着讲明白)作用(干什么)(我在试着讲明白)架构(有什么)(我在试着讲明白)优缺点(我在试着讲明白)优点缺点流程(怎么运作)(我在试着讲明白)常用(必会)(我在试着讲明白)常见问题(必知)(我在试着讲明白)异议 本质(是什么)(我在试着讲明白) 作用(干什么)(我在试着讲明白) 架构(有什么)(我在试着讲明白) 优缺点(我在试着讲明白) 优点 缺点...原创 2019-12-13 17:28:44 · 82 阅读 · 0 评论 -
SparkSql
目录(SparkSql)本质(是什么)(我在试着讲明白)作用(干什么)(我在试着讲明白)架构(有什么)(我在试着讲明白)Spark SQL由core,catalyst,hive和hive-thriftserver4个部分组成。1.Catalyst执行优化器UDFUDAF开窗函数优缺点(我在试着讲明白)优点缺点流程(怎么运作)(我在试着讲明白)Sql运行流程sparkSql 运行原理分析1.使用Se...原创 2019-12-13 15:45:34 · 578 阅读 · 0 评论 -
SparkCore
目录(SparkCore)本质(是什么)(我在试着讲明白)作用(干什么)(我在试着讲明白)架构(有什么)(我在试着讲明白)优缺点(我在试着讲明白)优点缺点流程(怎么运作)(我在试着讲明白)代码流程资源调度流程任务调度流程常用(必会)(我在试着讲明白)RDD常用的几个Action算子常见问题(必知)(我在试着讲明白)spark区分宽窄依赖的原因是什么?RDD的弹性哪里体现?哪里体现了RDD的分布式t...原创 2019-12-06 15:59:52 · 116 阅读 · 0 评论 -
Spark 理解
目录(Spark)本质(是什么)(我在试着讲明白)作用(干什么)(我在试着讲明白)架构(有什么)(我在试着讲明白)优缺点(我在试着讲明白)优点缺点流程(怎么运作)(我在试着讲明白)常用(必会)(我在试着讲明白)常见问题(必知)(我在试着讲明白)1、Spark与MR的区别?异议 本质(是什么)(我在试着讲明白) 基于内存的计算框架 作用(干什么)(我在试着讲明白) Spark是MapReduce的替...原创 2019-11-19 20:57:06 · 218 阅读 · 0 评论