掌握RDD算子

该文介绍了使用ApacheSpark进行数据处理的基本步骤,首先创建了一个名为rdd1的ResilientDistributedDataset(RDD),接着将rdd1的每个元素进行平方操作生成了rdd2。然后,文章提到了使用映射算子来打印菱形图案,虽然具体实现未详述,但暗示了Spark对数据的计算能力。最后,文章可能还涉及其他RDD的操作或转换,但具体内容未给出。
摘要由CSDN通过智能技术生成

1.

  • 预备工作:创建一个RDD - rdd1
  • 执行命令:val rdd1 = sc.parallelize(List(1, 2, 3, 4, 5, 6))

 

 

 

 

 

 

2.将rdd1每个元素平方得到rdd2

 

 

 

 

 

3.利用映射算子打印

菱形

 

 

 

4.

 

 

 

 

 

 

5.

 

 

 

6.

 

 

 

7.

 

 

 

 

8.

 

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值