Spark常用的RDD
1. Tranformation
val lines=sc.textFile(file:///usr/local/spark/mycode/rdd/word.txt)
### #1. map map(func) 将每个元素传递给函数 func 中,并将返回结果返回为一个新的数据集
scala> val data=Array(1,2,3,4,5)
scala> val rdd1 = sc.parallelize(data)
scala> val rdd2=rdd1.map(x
原创
2020-09-09 18:44:20 ·
216 阅读 ·
0 评论