【hadoop学习之路】Spark-SQL 实验报告 RDD转DataFrame

1. Spark-SQL 基本操作

1.1 需求

将下列JSON格式数据复制到Linux系统中，并保存命名为employee.json

{ "id":1 , "name":"Ella" , "age":36 }

{ "id":2, "name":"Bob","age":29 }

{ "id":3 , "name":"Jack","age":29 }

{ "id":4 , "name":"Jim","age·":28 }

{ "id":4 , "name":"Jim","age":28 }

{ "id":5 , "name":"Damon" }

{ "id":5 , "name":"Damon" }

为employee.json创建DataFrame，并写出Scala语句完成下列操作：

(1)  查询所有数据；

(2)  查询所有数据，并去除重复的数据；

(3)  查询所有数据，打印时去除id字段；

(4)  筛选出age>30的记录；

(5)  将数据按age分组；

(6)  将数据按name升序排列；

(7)  取出前3行数据；

(8)  查询所有记录的name列，并为其取别名为username；