在代码中,其实很容易实现,我们看下在sql里面怎么实现,关键知识点:spark inline表 + create view
代码如下:
val query1=spark.sql(
""" CREATE OR REPLACE VIEW data AS
| select * FROM VALUES ('A', 'B',1, 2, 3, 4)
| AS data1(title, desc, position, grades ,year ,level);
|""".stripMargin)
// 注意,必须使用create or replace view 语句,否则在下文里面,是不能查到data表的数据
val query2=spark.sql("select * from data ")
query2.printSchema()
query2.show()
参考文档: