PHP大批量插入数据库的3种方法和速度对比

最新推荐文章于 2022-08-18 17:18:56 发布

qyyl2013

最新推荐文章于 2022-08-18 17:18:56 发布

阅读量667

点赞数

分类专栏： php 文章标签： php

php 专栏收录该内容

13 篇文章 0 订阅

订阅专栏

这篇文章主要介绍了PHP大批量插入数据库的3种方法和速度对比,3种方法分别使用普通insert语句、insert into语句和事务提交,需要的朋友可以参考下

第一种方法：使用insert into 插入，代码如下：

 
          $params 
           =  
          array 
          (‘value 
          '=>' 
          50′);  
         
 
          set_time_limit(0);  
         
 
          echo 
           date 
          (“H:i:s”);  
         
 
          for 
          ( 
          $i 
          =0; 
          $i 
          <2000000; 
          $i 
          ++){  
         
 
          $connect_mysql 
          ->insert( 
          $params 
          );  
         
 
          };  
         
 
          echo 
           date 
          (“H:i:s”); 
         

最后显示为：23:25:05 01:32:05 也就是花了2个小时多!

第二种方法：使用事务提交，批量插入数据库(每隔10W条提交下)最后显示消耗的时间为：22:56:13 23:04:00 ，一共8分13秒，代码如下：

 
          echo 
           date 
          (“H:i:s”);  
         
 
          $connect_mysql 
          ->query(‘BEGIN');  
         
 
          $params 
           =  
          array 
          (‘value 
          '=>' 
          50′);  
         
 
          for 
          ( 
          $i 
          =0; 
          $i 
          <2000000; 
          $i 
          ++){  
         
 
          $connect_mysql 
          ->insert( 
          $params 
          );  
         
 
          if 
          ( 
          $i 
          %100000==0){  
         
 
          $connect_mysql 
          ->query(‘COMMIT');  
         
 
          $connect_mysql 
          ->query(‘BEGIN');  
         
 
          }  
         
 
          }  
         
 
          $connect_mysql 
          ->query(‘COMMIT');  
         
 
          echo 
           date 
          (“H:i:s”); 
         

第三种方法：使用优化SQL语句：将SQL语句进行拼接，使用 insert into table () values (),(),(),()然后再一次性插入，如果字符串太长，

则需要配置下MYSQL，在mysql 命令行中运行：set global max_allowed_packet = 2*1024*1024*10;消耗时间为：11:24:06 11:25:06;

插入200W条测试数据仅仅用了1分钟!代码如下：

 
          $sql 
          = “insert into twenty_million (value) values”;  
         
 
          for 
          ( 
          $i 
          =0; 
          $i 
          <2000000; 
          $i 
          ++){  
         
 
          $sql 
          .=”('50′),”;  
         
 
          };  
         
 
          $sql 
           =  
          substr 
          ( 
          $sql 
          ,0, 
          strlen 
          ( 
          $sql 
          )-1);  
         
 
          $connect_mysql 
          ->query( 
          $sql 
          ); 
         

最后总结下，在插入大批量数据时，第一种方法无疑是最差劲的，而第二种方法在实际应用中就比较广泛，第三种方法在插入测试数据或者其他低要求时比较合适，速度确实快。

id="aswift_0" style="POSITION: absolute; LEFT: 0px; TOP: 0px" height="250" marginheight="0" frameborder="0" width="300" allowtransparency="" name="aswift_0" marginwidth="0" scrolling="no" allowfullscreen="true">

id="cproIframe_u91397" height="250" marginheight="0" src="http://pos.baidu.com/acom?adn=3&at=231&aurl=&cad=1&ccd=32&cec=gb2312&cfv=16&ch=0&col=zh-CN&conOP=0&cpa=1&dai=2&dis=0&ltr=http%3A%2F%2Fwww.baidu.com%2Fs%3Fie%3Dutf-8%26f%3D8%26rsv_bp%3D1%26tn%3Dbaidu%26wd%3Dphp%25E6%2595%25B0%25E6%258D%25AE%25E5%25BA%2593%25E6%2589%25B9%25E9%2587%258F%25E6%25B7%25BB%25E5%258A%25A0%26rsv_pq%3Dfe03ff010004969d%26rsv_t%3D3d693k%252FMaxGwGIw4xq8kJRt87AW5F%252BSZOs5UcHl2tAGmGXwGAc1YgBbWLB0%26rsv_enter%3D1%26inputT%3D773%26rsv_sug3%3D14%26rsv_sug4%3D212%26rsv_sug2%3D0&ltu=http%3A%2F%2Fwww.jb51.net%2Farticle%2F51975.htm&lunum=6&n=jb51_cpr&pcs=1903x944&pis=10000x10000&ps=514x1105&psr=1920x1080&pss=1903x767&qn=08c6894d344bccf4&rad=&rsi0=300&rsi1=250&rsi5=4&rss0=%23FFFFFF&rss1=%23F7FCFF&rss2=%23006699&rss3=%23333333&rss4=%23333333&rss5=&rss6=%23e10900&rss7=&scale=&skin=&td_id=91397&tn=text_default_300_250&tpr=1418608597727&ts=1&xuanting=0&dtm=BAIDU_DUP2_SETJSONADSLOT&dc=2&di=u91397" frameborder="0" width="300" allowtransparency="" marginwidth="0" scrolling="no">