- 博客(1)
- 收藏
- 关注
RSS订阅原创 spark面试题部分总结
弹性分布式数据集 数据流过而不留下spark计算的数据存储在RDD中(数据集)rdd是带有分区的，每个分区存储一部分数据，RDD的分区分布在集群各个节点(分布式)rdd的分区数在计算中可以增加或者减少 (弹性)不可变 对rdd中数据的计算会返回一个新的RDD，原有RDD中的数据不会改变如果RDD的某个分区计算出错了，这个分区的数据会转给其他executor或者其他节点继续执行(分区的容错性)我认为这些了理论难以表述清楚，举个场景:在Spark中，foreach()
2023-06-25 20:30:08
329
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人