其实,对于数据清理部分的去重工作,很多工具都可以做到这一点,还有对应的随机选取,但是最近听到关于mysql的另类做法(之前只知道distinct()函数)。
https://www.cnblogs.com/Qi1007/p/9671194.html mysql行列转换
https://blog.csdn.net/bocodb/article/details/4482010 综合
https://www.cnblogs.com/whyly/p/9772884.html 去重的mysql
去重总体 https://blog.csdn.net/zhangqun23/article/details/52904707