IDEA scala语言 用spark 读取mysql数据统计top10再重新写入mysql(只提供这种方法还有其他方法欢迎补充),按照步骤不成功的话,文末有项目连接,有笔记等,测试代码等...
目标:用spark将mysql数据库library中的lend_list表中的bookId,booktype,readerId三张表的共计513行数据统计出各自的top10。如下图:第一步:idea创建项目pom.xml :如下简单讲一下思路(包含但不限于):1.读出mysql数据并将数据写入本地txt文件(F:\\Desktop\\data_booktype.txt)2.从这个文件中读取数据并计数,累加,top排名3.将top排名数据写入mysql 新建Spark_SQL.scala文件内容如下
原创
2022-06-12 01:25:03 ·
941 阅读 ·
0 评论