先简单放一下用到的:
MYSQL : 5.6版本
python3
powershell。
将csv导入mysql,主要就是用mysql的load data功能实现,其他前辈也都讲得很清楚了,这里简单列一下语句(注意enclosed只有一个双引号,此外‘忽略’那里,rows表示的是列,lines表示的是行,这里略去首行):
load data local infile 'filepath' into table tablename fields terminated ',' enclosed by '"' lines terminated by '\n' ignore 1 lines:
local关键字声明是从客户端传来服务器,即使文件在本地也可以用,就是速度会慢一些。而如果文件在本地且不用local关键字,那么需要把文件放在Mysql的Data文件夹下,查看Mysql的data文件夹:
show variables like 'datadir'
然后就是批量的实现了,由于掉了好几次坑,所以我用了两种办法来实现,一个用python3,另一个用Powershell的脚本
不知道为什么windows上的MySQLdb支持不了python3(Linux的可以),于是换了pymysql,用了local关键字导入了第一批数据,没有问题,就是速度比较慢,感觉每秒1M多吧。
++++++++++++++++&