- 博客(6)
- 问答 (1)
- 收藏
- 关注
原创 SQL-让列数据的排序方式为你指定的方式排序
但是结果并不理想:(如下图,本应在第10位的‘钢渣’跑到了第二位,除此之外均正常。成功得到自定义排序序列!回到最开始的业务场景:修改‘钢渣’的序号“想法一:使用order by decode() 进行排序。使用:order by decode() 进行排序。order by decode() 进行排序。10号序列依旧抢位,但排除中文括号干扰的情况。可以看出排序混乱,使用。
2023-08-24 12:00:48 601 1
原创 IDEA scala语言 用spark 读取mysql数据统计top10再重新写入mysql(只提供这种方法还有其他方法欢迎补充),按照步骤不成功的话,文末有项目连接,有笔记等,测试代码等...
目标:用spark将mysql数据库library中的lend_list表中的bookId,booktype,readerId三张表的共计513行数据统计出各自的top10。如下图:第一步:idea创建项目pom.xml :如下简单讲一下思路(包含但不限于):1.读出mysql数据并将数据写入本地txt文件(F:\\Desktop\\data_booktype.txt)2.从这个文件中读取数据并计数,累加,top排名3.将top排名数据写入mysql 新建Spark_SQL.scala文件内容如下
2022-06-12 01:25:03 958
原创 从零教你如何通过Sqoop把Hadoop HDFS上的数据同步数据到MySQL中(附带数据集,报错提示并修改)
Sqoop同步数据到MySQL实验结果
2022-06-10 23:06:44 2418
原创 Linux 数据集(sql脚本)下载。Windows通过sqlyog将sql脚本导入到linux mysql中(以便接下来使用Sqoop 将 mysql数据同步到Hive)
Windows通过sqlyog将sql脚本导入到linux mysql中(以便接下来使用Sqoop 将 mysql数据同步到Hive)2.
2022-04-02 16:53:09 3716 1
原创 jupyter notebook 中运行from scipy import stats之后报错FutureWarning:
jupyter notebook 中运行from scipy import stats之后报错FutureWarning:
2022-03-22 23:52:29 2479
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人