- 博客(1)
- 收藏
- 关注
RSS订阅原创 RDD编程初级实践
需求描述 本次实验需要熟悉Spark的RDD基本操作及键值对操作、熟悉使用RDD编程解决实际具体问题的方法。pyspark交互式编、编写独立应用程序实现数据去重、编写独立应用程序实现求平均值问题。spark的编码格式是utf-8，其他的格式会有乱码，所以文件要使用utf-8编码。 环境介绍 虚拟机：Oracle VM VirtualBox。 操作系统：Ubuntu16.04。 Spark版本：2.4.0。 Python版本：3.4.3。 数据来源描述 数据来源于老师课堂发布文件data.txt,编
2021-06-15 00:01:34
6154
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人