在需要导入大量数据到数据库中时,逐条insert 导入时间比较长,这就可以考虑使用load data进行导入,百万级数据量不到一分钟就出来了,这里给出事例如下:
LOAD DATA INFILE '/data/test.csv' #数据文件路径
INTO TABLE t_test #要导入的数据表
FIELDS TERMINATED BY ',' #按照逗号分隔
LINES TERMINATED BY '\r\n' #每行数据按换行符
(column1,column2,column3) #要导入的对应表字段
注意:导出时可能会出现下面的错误:
The MySQL server is running with the --secure-file-priv option so it cannot execute this statement
这是因为MySQL 限制了数据的导出路径。MySQL 导入导出文件只能在 secure-file-priv 变量的指定路径下的文件才可以导入导出。
有以下 2 种解决办法:
- 首先使用show variables like ‘%secure%’;语句查看 secure-file-priv 变量配置。
mysql> show variables like '%secure%' \G
*************************** 1. row ***************************
Variable_name: require_secure_transport
Value: OFF
*************************** 2. row ***************************
Variable_name: secure_auth
Value: ON
*************************** 3. row ***************************
Variable_name: secure_file_priv
Value: C:\ProgramData\MySQL\MySQL Server 5.7\Uploads\
3 rows in set, 1 warning (0.04 sec)
secure_file_priv 的值指定的是 MySQL 导入导出文件的路径。将 SQL 语句中的导出文件路径修改为该变量的指定路径,再执行导入导出操作即可。也可以在 my.ini 配置文件中修改 secure-file-priv 的值,然后重启服务即可。
- 如果 secure_file_priv 值为 NULL,则为禁止导出,可以在 MySQL 安装路径下的 my.ini 文件中添加secure_file_priv=设置路径语句,然后重启服务即可。