RDD程序设计

1、spark-shell交互式编程

（一）导入实验数据

（二）求该系总共有多少学生

 

（三）该系总共开设多少门课程 

（四） Tom同学的总成绩平均分是多少

 

（五）该系DataBase课程共有多少人选修

 

 （六）各门课程的平均分是多少

（七）使用累加器计算共有多少人选了DataBase这门课

 

2、编写独立应用程序实现数据去重

（一）代码编写

 

（二）结果输出 

 3、编写独立应用程序实现求平均值问题

（一）代码编写

 （二）结果输出