- 博客(1)
- 收藏
- 关注
原创 RDD编程初级实践
1、需求描述 本次操作实验为RDD编程初级综合实践,其中包含pyspark交互式编程、编写独立应用程序实现数据去重、编写独立应用程序实现求平均值问题等三大RDD编程实验。 本次旨在熟悉Spark的RDD基本操作及键值对操作,熟悉使用RDD编程解决实际具体问题的方法。Spark 的核心是建立在统一的抽象弹性分布式数据集RDD之上的,这使得 Spark 的各个组件可以无缝地进行集成,能够在同一个应用程序中完成大数据处理。RDD 是 Spark 提供的最重要的抽象概念,它是一种有容错机制的特殊数据集合,可以分
2021-06-12 13:56:29
1015
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人