- 博客(2)
- 收藏
- 关注
RSS订阅原创 【spark】spark RDD常用指令整理
RDD指令一大把，如果长时间不用的话，很容易就会忘了。因此本文按照一定的使用逻辑将spark RDD的常用指令整理了一下，如果以后忘了的时候，可以快速检索和查阅相关指令。spark RDD可以分为一下两类：每种类型都有他们独立的指令集，下边我们分类整理两种类型的指令集，以及他们相互转换的方式。本文对RDD常用操作按照一定逻辑进行划分，构造索引脑图，供后续快速检索和应用。...
2022-06-18 21:46:38
346
原创 【spark】这可能是最通俗易懂的spark运行架构解释
官方的架构图太过简单，没有具体的交互细节。为此，我花了一个下午时间梳理了一下详细一点的spark的运行流程架构图，然后想了个通俗易懂的比喻来拟合它们之间的关系：总体架构图如下主要由如下组件：本文用通俗易懂的比喻来描述spark运行架构里面各个组件的主要作用和大致交互的逻辑，希望对读者们能有所帮助。如有错漏，还望指出。...
2022-06-18 21:30:19
758
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人