![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark数据层分析处理
文章平均质量分 74
鲲到底有多大
一名因爱好unity和编程初学的学生,想通过此博客把自己平常想到的一些问题呈现并记录下来,每一篇都会实现自己的一个想法或功能,以此来勉励自己不断学习下去。
展开
-
Spark Sql数据分析(三)
Sql数据分析实战案例原创 2023-02-24 17:43:24 · 335 阅读 · 0 评论 -
Spark SQL数据处理与数据分析(二)
spark 电影数据分析,多个问题,层层递进。原创 2023-02-23 15:32:39 · 484 阅读 · 0 评论 -
Spark SQL数据处理(一)
通过Spark Dataframe API和Sql两种语句处理豆瓣电影数据集,该数据包含五个表格:movies.csv、person.csv、users.csv、comments.csv、ratings.csv。对每个表格进行单独简单的清理,最后写入mysql数据库中总的数据处理步骤有:删除多余的列,更改列的数据类型,存入mysql数据库。原创 2023-02-18 12:46:32 · 758 阅读 · 0 评论