SqlBulkCopy 实现原汁原味复制的注意事项

1. 有标识列的表

1. 1 SqlBulkCopyOptions.KeepIdentity  必须设置!否则会出现复制过去的数据产生标识列发现变化的情况!

1.2 如果原表的标识列即为主键, 那按1.1 的设置已足够。 如果原表无主键, 那在复制之前必须先清空原表(truncate table), 否则会出现多个相同的标识值的列!

2. 为NULL值的列

2.1 SqlBulkCopyOptions.KeepNulls 必须设置!否则会出现源数据的字段为NULL时, 复制过去却成了默认值!


其它几个选项的说明与分析:

 Default  对所有选项使用默认值。  
 KeepIdentity 保留源标识值。如果未指定,则由目标分配标识值。  
 CheckConstraints  请在插入数据的同时检查约束。默认情况下,不检查约束。  
 TableLock  在批量复制操作期间获取批量更新锁。如果未指定,则使用行锁。  
 KeepNulls 保留目标表中的空值,而不管默认值的设置如何。如果未指定,则空值将由默认值替换(如果适用)。  
 FireTriggers  指定后,会导致服务器为插入到数据库中的行激发插入触发器。  默认情况下, 是不激发触发器的……
 UseInternalTransaction  如果已指定,则每一批批量复制操作将在事务中发生。 在一个事务中执行,要么都成功,要么都不成功


Default 就没有什么好说的了, 不要

KeepIdentity  和 KeepNulls  上面已有了, 不再分析。

CheckConstraints 不需要, 因为是现成的数据, 既然已在DB中, 必然是通过了约束检查的。

TableLock 不需要, 因为复制时两个库都需要处于单连接状态, 不可能有干扰。

FireTriggers  一般就不需要了吧, 毕竟只是复制数据, 而且是现成的数据……

UseInternalTransaction  关系也不大, 反正复制失败会记录到自定义的日志, 失败了也知道, 重来一次就可以了。



下面是便于测试的代码

SQL:

--1. 建数据来源表
IF EXISTS (  
       SELECT 1 FROM   sysobjects  
       WHERE  id = OBJECT_ID(N'Table_1')  
              AND OBJECTPROPERTY(id, N'IsUserTable') = 1  
   )  
BEGIN  
    DROP TABLE Table_1  
END  
GO  
Create Table Table_1(	
	ID INT, 
	[NAME] VARCHAR(50) DEFAULT('xx')
)
GO
INSERT INTO Table_1
SELECT 1,'a' UNION
SELECT 2,'b' UNION
SELECT 3,'c' UNION
SELECT 4,'d' UNION
SELECT 5,'e' UNION
SELECT 6,null

--2. 建目标表
IF EXISTS (  
       SELECT 1 FROM   sysobjects  
       WHERE  id = OBJECT_ID(N'Table_2')  
              AND OBJECTPROPERTY(id, N'IsUserTable') = 1  
   )  
BEGIN  
    DROP TABLE Table_2  
END  
GO  
Create Table Table_2(	
	ID2 INT, 
	[NAME2] VARCHAR(50) DEFAULT('xx')
)
GO


--复制时的对应关系
--Tabe_1 ==> Table_2
--ID     ==> ID2
--[NAME] ==> [NAME2]


C# 控制台程序:

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using System.Data.SqlClient;
using System.Collections;

namespace SqlBulkCopyDemo
{
    class Program
    {
        static void Main(string[] args)
        {
            string connString = System.Configuration.ConfigurationManager.AppSettings["DCString"];
            SqlConnection ConnectionNew = new SqlConnection(connString);
            SqlConnection ConnectionOld = new SqlConnection(connString);
            bool ExportInfo = System.Configuration.ConfigurationManager.AppSettings["ExportInfo"].ToLower()=="true";
            try
            {
                ConnectionNew.Open();
                ConnectionOld.Open();

                //1.在旧表中,用SqlDataReader读取出信息  
                string SQL = "select * from Table_1";

                SqlCommand cmd = new SqlCommand(SQL, ConnectionOld);
                cmd.CommandTimeout = 7200;
                SqlDataReader sdr = cmd.ExecuteReader();

                //2.初始化SqlBulkCopy对象,用新的连接作为参数。  
                SqlBulkCopy bulkCopy = new SqlBulkCopy(ConnectionNew, SqlBulkCopyOptions.KeepIdentity | SqlBulkCopyOptions.KeepNulls, null);
                bulkCopy.BulkCopyTimeout = 7200;

                //3.写对应关系。如旧表的People列的数据,对应新表Human列,那么就写bulkCopy.ColumnMappings.Add("People","Human")  
                //如果两张表的结构一样,那么对应关系就不用写了。  
                //我是用哈希表存储对应关系的,哈希表作为参数到传入方法中,key的值用来存储旧表的字段名,VALUE的值用来存储新表的值  
                Hashtable ht = new Hashtable();
                ht.Add("ID", "ID2");
                ht.Add("NAME", "NAME2");//  

                foreach (string str in ht.Keys)
                {
                    bulkCopy.ColumnMappings.Add(str, ht[str].ToString());
                }

                //4.设置目标表名  
                bulkCopy.DestinationTableName = "Table_2";

                //额外,可不写:设置一次性处理的行数。这个行数处理完后,会激发SqlRowsCopied()方法。默认为1  
                bulkCopy.NotifyAfter = 1;

                if (ExportInfo)
                {
                    //额外,可不写:设置激发的SqlRowsCopied()方法,这里为bulkCopy_SqlRowsCopied  
                    bulkCopy.SqlRowsCopied += new SqlRowsCopiedEventHandler(bulkCopy_SqlRowsCopied);
                }

                //OK,开始传数据! 
                DateTime dt = DateTime.Now;
                Console.WriteLine("开始时间:{0:yyyy-MM-dd HH:mm:ss,ms}", dt);
                bulkCopy.WriteToServer(sdr);
                DateTime dt2 = DateTime.Now;
                Console.WriteLine("结束时间:{0:yyyy-MM-dd HH:mm:ss,ms}", dt2);
                double time = dt2.Subtract(dt).TotalMilliseconds;
                Console.WriteLine("传输完毕!所用时间为:{0}(ms)", time);
                Console.Read();
            }
            catch (Exception ex)
            {
                Console.Write(ex.Message);
                Console.Read();
            }
            finally
            {
                ConnectionNew.Close();
                ConnectionOld.Close();
            }
        }

        //激发的方法写在外头  
        private static void bulkCopy_SqlRowsCopied(object sender, SqlRowsCopiedEventArgs e)
        {
            //执行的内容。  
            //这里有2个元素值得拿来用  
            //e.RowsCopied,  //返回数值类型,表示当前已经复制的行数  
            //e.Abort,       //用于赋值true or false,用于停止赋值的操作  
            Console.WriteLine("当前已复制的行数:" + e.RowsCopied);
        }
    }
}

配置文件:

<?xml version="1.0" encoding="utf-8" ?>
<configuration>
  <appSettings>
    <add key="DCString" value="Data Source=(local);Initial Catalog=db_Study;Persist Security Info=True;User ID=??;Password=??" />
    <add key="ExportInfo" value="false" />
  </appSettings>
</configuration>




评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值