高效的批量数据库操作

这阵子研究了数据库批量操作，为了让数据库批量操作时更高效，更优化，查询了网上的一些资料，今日记下，供以后用，也为广大的码友进行参考。

一、SQL批量增添数据记录

  方法一：

<span style="font-size:14px;">public static void insert() {  
        // 开时时间  
        Long begin = new Date().getTime();  
        // sql前缀  
        String prefix = "INSERT INTO tb_big_data (count, create_time, random) VALUES ";  
        try {  
            // 保存sql后缀  
            StringBuffer suffix = new StringBuffer();  
            // 设置事务为非自动提交  
            conn.setAutoCommit(false);  
            // Statement st = conn.createStatement();  
            // 比起st，pst会更好些  
            PreparedStatement pst = conn.prepareStatement("");  
            // 外层循环，总提交事务次数  
            for (int i = 1; i <= 100; i++) {  
                // 第次提交步长  
                for (int j = 1; j <= 10000; j++) {  
                    // 构建sql后缀  
                    suffix.append("(" + j * i + ", SYSDATE(), " + i * j  
                            * Math.random() + "),");  
                }  
                // 构建完整sql  
                String sql = prefix + suffix.substring(0, suffix.length() - 1);  
                // 添加执行sql  
                pst.addBatch(sql);  
                // 执行操作  
                pst.executeBatch();  
                // 提交事务  
                conn.commit();  
                // 清空上一次添加的数据  
                suffix = new StringBuffer();  
            }  
            // 头等连接  
            pst.close();  
            conn.close();  
        } catch (SQLException e) {  
            e.printStackTrace();  
        }  
        // 结束时间  
        Long end = new Date().getTime();  
        // 耗时  
        System.out.println("cast : " + (end - begin) / 1000 + " ms");  
    }  </span>

输出时间：cast : 23 ms

该方法目前测试是效率最高的方法!

方法二

Union All做合并，合并完一张表之后，整张表导入。下面就简单介绍一下。

    Union All是做联表查询的，平常的用法是：

         select * from Table1 union all select * from Table2

union all在这里的用法是，查询Table1的时候，先查询Table2的所有字段，将所有字段和Table2合并起来，然后显示出来。union同样也能做这个功能，不过二者有一点区别。union合并的时候，是两张表相同的字段合并为一个字段，而union all做到的是整张表所有的字段都合并给Table1。

所以批量插入时可以
insert into table(字段1，字段2，...) UNION ALL select '字段1'，'字段2'，.... UNION ALL select '字段11'，'字段21'，....