使用load data方式将xlsx表格百万行文件快速导入mysql中（二）

最新推荐文章于 2023-04-19 17:13:38 发布

车水码笼

最新推荐文章于 2023-04-19 17:13:38 发布

阅读量1.7k

点赞数 1

分类专栏： Mysql 文章标签： mysql 百万行 xlsx

本文链接：https://blog.csdn.net/ShoneX98/article/details/85254731

版权

6 篇文章 0 订阅

订阅专栏

一、准备阶段

首先测试以下导入方式（均使用load data方法）：

结果：不仅出现乱码，而且还出现会多出很多行的情况，这是因为包含了很长字符串的行会自动换行。导致行数虚增，这种方式导入不靠谱，或者说先要解决掉这个很长字符串的列。

结果：会有乱码，并且行数较少，明显少于需求行，与python导入出现的情况类似。也不适合。

结果：可行，不缺行。

结果：可行，不缺行，完美，更倾向于这种方式。

1、查看某个表格字段格式：

show create table test1;

修改这个字段为gbk格式：

alter table test1 default character set gbk;

2、查看字符设置char的变量：

show variables like 'char%';

修改为gbk：

set character_set_database =gbk;

3、查看sql_mode是否有限制：

show variables like '%sql_mode%';

如果有STRICT_TRANS_TABLES，这个表示超过长度就报错，可以去掉这个设置：

set SESSION sql_mode='';

4、查看某个表的行数：

select count(*) from test1;

注意，count(*)是连在一起的，不要分开。

load data infile 'E:\\XSH\\MySQL\\Jan.csv'
into table test1
fields terminated by ','
ignore 1 lines
(交易订单号,实收金额,商品小计,商品编码,商品名称);

注意：导入乱码有可能是character_set_database和数据库的表的字段的格式不匹配，需要相同的数据格式，可以用front修改表内字段的格式为gbk。

如有疑问，欢迎探讨！

关注