Mysql
CJ-404
这个作者很懒,什么都没留下…
展开
-
python中利用to_sql将数据插入MySQL数据库
python中利用to_sql将数据插入MySQL数据库前言最近需要将一些CSV文件导入mysql数据库中,所以需要写一个导入程序。在以前导入数据时利用pysql一条一条读取再写入,花费的时间特别长,最近看了解到pandas中利用第三方包导入速度特别快,语法也特别简单,特此记录。1:引入第三方包import pandas as pdfrom sqlalchemy import crea...原创 2020-02-13 17:02:48 · 1971 阅读 · 1 评论 -
使用python往MySQL数据库中导入数据避免重复数据导入
一般的,去处重复数据有两个意义,一是完全重复的记录,也即所有字段均都重复,二是部分字段重复的记录。对于第一种重复,比较容易解决,只需在查询语句中使用distinct关键字去重,几乎所有数据库系统都支持distinct操作。发生这种重复的原因主要是表设计不周,通过给表增加主键或唯一索引列即可避免。select distinct * from table;对于第二类重复问题,通常要求查询出重复记...原创 2018-12-27 15:19:46 · 7122 阅读 · 0 评论