Spark 对包含数值数据的 RDD 提供了一些描述性的统计操作。 Spark 的数值操作是通过流式算法实现的,允许以每次一个元素的方式构建出模型。这些 统计数据都会在调用 stats() 时通过一次遍历数据计算出来,并以 StatsCounter 对象返回
![9193428-dfce3f2a36bbd9eb.png](https://i-blog.csdnimg.cn/blog_migrate/2cb605802fe29311c0b888cf498d9502.webp?x-image-process=image/format,png)
scala> val rdd = sc.makeRDD(1 to 100)
rdd: org.apache.spark.rdd.RDD[Int] = ParallelCollectionRDD[0] at makeRDD at <console>:24
scala> rdd.sum
res0: Double = 5050.0
scala> rdd.max
res1: Int = 100
scala> rdd.min
res2: Int = 1