ado.net mysql 批量插入_海量数据插入数据库效率对比测试---ADO.NET下SqlBulkCopy()对比L...

摘要：使用.NET相关技术向数据库中插入海量数据是常用操作。本文对比ADO.NET和LINQ两种技术，分别使用SqlBulkCopy()和InsertAllOnSubmit()方法进行操作。得出结论：相同插入工作量(1w条数据)插入效率相差200倍之巨！ 测试场景： 准备两个数据库TestDb和Tes

摘要：使用.NET相关技术向数据库中插入海量数据是常用操作。本文对比ADO.NET和LINQ两种技术，分别使用SqlBulkCopy()和InsertAllOnSubmit()方法进行操作。得出结论：相同插入工作量(1w条数据)插入效率相差200倍之巨！

测试场景：

准备两个数据库TestDb和TestDb2，有表：T_Users。表结构如下图所示：

SqlBulkCopy()插入方法如下：

private static Stopwatch InsertUsingSqlBulkCopy(Listlist)

{

Stopwatch stopWatch = new Stopwatch();

stopWatch.Start();

DataTable dt = new DataTable();

dt.Columns.Add("ID");

dt.Columns.Add("UserName");

for (int i = 0; i < list.Count; i++)

{

DataRow row = dt.NewRow();

row["ID"] = list[i].ID;

row["UserName"] = list[i].UserName;

dt.Rows.Add(row);

}

using (SqlConnection con = new SqlConnection(connStr2))

{

con.Open();

using (SqlBulkCopy bulkCopy = new SqlBulkCopy(con))

{

try

{

bulkCopy.DestinationTableName = "dbo.T_UserName";

bulkCopy.ColumnMappings.Add("ID", "ID");

bulkCopy.ColumnMappings.Add("UserName", "UserName");

bulkCopy.WriteToServer(dt);

}

catch (Exception ex)

{

Console.WriteLine(ex.ToString());

}

finally { con.Close(); }

}

}

stopWatch.Stop();

return stopWatch;

}

LINQ插入方法如下所示：

private static Stopwatch InsertUsingLINQ(List_list)

{

Stopwatch stopWatch = new Stopwatch();

stopWatch.Start();

DataClasses1DataContext dataContext = new DataClasses1DataContext();

dataContext.T_Users.InsertAllOnSubmit(_list);

dataContext.SubmitChanges();

stopWatch.Stop();

return stopWatch;

}

使用上述代码分别导入1万条User数据进入数据库。

得到结果如下图所示：

相同插入工作量(1w条数据)前提下，结论：

1 ADO.NET下SqlBulkCopy()方法是LINQ TO SQL下InsertAllOnSubmit()方法插入效率相差266倍之巨！

2 LINQ使用便捷、代码简短、学习成本低，语言表达优雅；但是，如果对效率要求较高的海量数据相关操作优先推荐使用ADO.NET方法。

相关源码下载地址：http://download.csdn.net/detail/fanrong1985/8130953

本条技术文章来源于互联网，如果无意侵犯您的权益请点击此处反馈版权投诉

本文系统来源：php中文网