大批量sql数据快速导入技巧

1.将批量执行的大数据先存为*.sql文件；

 

2.每个表在导出数据时都要先锁表并将索引关闭(索引关闭是不关闭的导入时减少2/3左右的时间对大数据迁移来说该方法很关键)；

 

3.直接进行mysql后执行source *.sql文件即可；

 

注:1。phpselect 文件时间注意相关参数的设置

    set_time_limit(0);

    ini_set('memory_limit', '1024M');
    ini_set('max_execution_time', '30000');

    2。mysql注意相关参数的设置

    //max_allowed_packet = 4096M 修改值很关键 插入1秒时间

   //wait_timeout=2880000
   //interactive_timeout = 2880000

   3。用insert into tbl_name values(...),(...),....代替 insert into tbl_name set field=values，提高sql语批量插入效率，

    数据每10万条一分隔即可。

 

    插入测试如下图: