ADO.NET 大数据上传的利器 SqlBulkCopy

最新推荐文章于 2018-09-25 16:20:00 发布

Masic_send

最新推荐文章于 2018-09-25 16:20:00 发布

阅读量608

点赞数

本文链接：https://blog.csdn.net/Masic_send/article/details/17022103

版权

今天在网上看到有人解决EXCEL大数据量插入sqlserver数据库的方法，用了一个SqlBulkCopy。后来研究了一下，50万条数据插入数据库用了13秒。500万数据用时5分钟。

 public string Init()
        {
            DataColumn dr_ID = new DataColumn("ID", System.Type.GetType("System.String"));
            dt.Columns.Add(dr_ID);
            DataColumn dr_TableName = new DataColumn("TableName", System.Type.GetType("System.String"));
            dt.Columns.Add(dr_TableName);
            DataColumn dr_isShow = new DataColumn("isShow", System.Type.GetType("System.Boolean"));            
            dt.Columns.Add(dr_isShow);

            for (int i = 0; i < tableCount; i++)
            {
                DataRow dr = dt.NewRow();
                dr["ID"] = i;
                dr["TableName"] = i + "Sqlbulkcopy";
                dr["isShow"] = true;
                dt.Rows.Add(dr);
            }
            string temp = string.Empty;
            temp = DateTime.Now.ToString();
            sqlBulk();
            temp += "|" + DateTime.Now.ToString();
            return temp;

        }

上面这个方法是在内存中生成数据内存表。

public void sqlBulk()
        {
            ConnectionNew.Open();
            SqlBulkCopy bulkCopy = new SqlBulkCopy(ConnectionNew);
            bulkCopy.BulkCopyTimeout = 50000;
            bulkCopy.DestinationTableName = "Sqlbulkcopy";
            bulkCopy.NotifyAfter = 500;
            bulkCopy.SqlRowsCopied += bulkCopy_SqlRowsCopied;
            bulkCopy.WriteToServer(dt);
            ConnectionNew.Close();
        }

这是具体用SqlBulkCopy的具体方法，用法很简单。大家可以去网上看一看资料，这里只是简单的记录下。