在spark中分区个数有着很重要的作用,它代表着spark作业的并行度,所以我们要很清楚的知道什么样的操作可以影响到分区个数。
请看下图。
这里罗列了spark中所有影响到分区个数的操作。
spark中可以影响到结果partition个数的操作
最新推荐文章于 2024-01-29 21:12:36 发布
在spark中分区个数有着很重要的作用,它代表着spark作业的并行度,所以我们要很清楚的知道什么样的操作可以影响到分区个数。
请看下图。
这里罗列了spark中所有影响到分区个数的操作。