SparkContext中有默认的RDD的分区,当系统运行过程中,可以通过下列方式获得
scala> sc.defaultParallelism
res10: Int = 8
scala> otherRDD.partitions.size
res11: Int = 8
SparkContext中有默认的RDD的分区,当系统运行过程中,可以通过下列方式获得
scala> sc.defaultParallelism
res10: Int = 8
scala> otherRDD.partitions.size
res11: Int = 8