![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据计算引擎-Spark
开发实习生
不是我很懒啥都不写,是我本来就很懒,啥都不想写
展开
-
【大数据计算引擎-Spark】 Spark 内核解析-上
Spark内核泛指Spark的核心运行机制,包括Spark核心组件的运行机制、Spark任务调度机制、Spark内存管理机制、Spark核心功能的运行原理等,熟练掌握Spark内核原理,能够帮助我们更好地完成Spark代码设计,并能够帮助我们准确锁定项目运行过程中出现的问题的症结所在。 Spark 内核概述 Spark 核心组件回顾 Driver Spark驱动器节点,用于执行Spark任务中...原创 2020-01-13 18:07:45 · 1040 阅读 · 0 评论 -
【大数据计算引擎-Spark】 Spark 内核解析-下
Spark内核泛指Spark的核心运行机制,包括Spark核心组件的运行机制、Spark任务调度机制、Spark内存管理机制、Spark核心功能的运行原理等,熟练掌握Spark内核原理,能够帮助我们更好地完成Spark代码设计,并能够帮助我们准确锁定项目运行过程中出现的问题的症结所在。 Spark Shuffle 解析 Shuffle 的核心要点 ShuffleMapStage与ResultS...原创 2020-01-13 18:09:39 · 1036 阅读 · 0 评论