spark RDD基础装换操作--ZipWithUniqueld操作

17.ZipWithUniqueld操作

创建由字母A~E组成的RDD,然后将每个元素与其对应的唯一ID进行拉链(zip)操作。
scala>  val rddData1 = sc.parallelize(Array("A","B","C","D","E"))
rddData1: org.apache.spark.rdd.RDD[String] = ParallelCollectionRDD[0] at parallelize at <console>:24

scala>  val rddData2 = rddData1.zipWithUniqueId()
rddData2: org.apache.spark.rdd.RDD[(String, Long)] = MapPartitionsRDD[2] at zipWithUniqueId at <console>:26

scala>  rddData2.collect
res1: Array[(String, Long)] = Array((A,0), (B,1), (C,2), (D,3), (E,4))

说明:
ZipWithUniqueld操作将RDD中的元素对应的唯一ID进行拉链(zip)操作。与zipWithIndex操作不同的是:它不需要先通过运算生成“ZipWithIndexRDD”。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值