mysql 远程load data_关于MySQL的load data infile

较短的SQL 语句比较长的SQL 语句要快，因为它们涉及服务器方的分析较少，而且还因为将它们通过网络从客户机发送到服务器更快。这些因素中有一些似乎微不足道(特别是最后一个因素)，但如果要装载大量的数据，即使是很小的因素也会产生很大的不同结果。我们可以利用上述的一般原理推导出几个关于如何最快地装载数据的实际结论：

LOAD DATA(包括其所有形式)比INSERT 效率高，因为其成批装载行。索引刷新较少，并且服务器只需分析和解释一条语句而不是几条语句。

LOAD DATA 比LOAD DATA LOCAL 效率更高。利用LOAD DATA，文件必须定位在服务器上，而且必须具有FILE 权限，但服务器可从磁盘直接读取文件。利用LOAD DATA LOCAL，客户机读取文件并将其通过网络发送给服务器，这样做很慢。

另外就是insert 的话，每运行一句，就更新一次索引,load 的话，全部执行完了再更新一次索引 (参考自http://www.debugease.com/mysql/281384.html)

究其根源主要是MySQL内部对于load 和 insert的处理机制不同.

Load的处理机制是:在执行load之前,会关掉索引,当load全部执行完成后,再重新创建索引.

Insert的处理机制是:每插入一条则更新一次数据库,更新一次索引.

补充:另外,load与insert的不同还体现在load省去了sql语句解析,sql引擎处理,而是直接生成文件数据块,所以会比Insert快很多.

即核心思想就是批量处理， insert也是可以提升的，处理方式就是进行批量insert

对于load infile只更新一次索引为不确认，查看http://dev.mysql.com/doc/refman/5.1/zh/sql-syntax.html#load-data 为执行该操作时为了提升性能可以使用ALTER TABLE...DISABLE KEYS关闭然后再执行，执行后再ALTER TABLE...ENABLE KEYS再次创建索引，创建索引的速度会更快。 查看http://dev.mysql.com/doc/refman/5.1/en/load-data.html

E文如下：

If you use LOAD DATA INFILE on an empty MyISAM table, all nonunique indexes are created in a separate batch (as for REPAIR TABLE). Normally, this makes LOAD DATA INFILE much faster when you have many indexes. In some extreme cases, you can create the indexes even faster by turning them off with ALTER TABLE .