spark学习
文章平均质量分 50
King of youth
从事vue前端技术栈,java后端技术栈,物联网,Python数据挖掘,大数据等领域的工作
展开
-
SparkSql之电影案例SQL编写
SparkSql之电影案例SQL编写需求1:查找电影评分个数超过50,且平均评分较高的前十部电影名称及其对应的平均评分,结果以下面字段结构输出,保存成任意文本格式(txt\csv)或者存储到数据库。需求2:查找每个电影类别及其对应的平均评分,结果以下面字段结构输出,保存成任意文本格式(txt\csv)或者存储到数据库。需求3:查找被评分次数较多的前十部电影,结果以下面字段结构输出,保存成任意文本格式(txt\csv)或者存储到数据库。运行环境准备需求1:查找电影评分个数超过50,且平均评分较高的前十部电影原创 2021-07-01 13:43:08 · 503 阅读 · 0 评论 -
You may get a different result due to the upgrading of Spark 3.0: Fail to parse ‘2012-8-7 13:41:28‘
You may get a different result due to the upgrading of Spark 3.0: Fail to parse '2012-8-7 13:41:28' in the new parser. You can set spark.sql.legacy.timeParserPolicy to LEGACY to restore the behavior before Spark 3.0, or set to CORRECTED and treat it as an原创 2021-06-30 21:23:47 · 2780 阅读 · 0 评论