今天公司要做大容量数据转移,所以研究了下这方面的知识。
主要是从将DB1的数据表转移到DB2,考虑到效率决定用bcp来做,这个工具还是蛮不错的。
其实本来想用复制功能的,那个有点麻烦,DTS太慢了。
下面就来说说bcp这个工具吧
bcp 实用工具在 Microsoft® SQL Server™ 2000 实例和数据文件之间以用户指定的格式复制数据。
语法
bcp {[[database_name.][owner].]{table_name | view_name} | "query"}
{in | out | queryout | format} data_file
[-m max_errors] [-f format_file] [-e err_file]
[-F first_row] [-L last_row] [-b batch_size]
[-n] [-c] [-w] [-N] [-V (60 | 65 | 70)] [-6]
[-q] [-C code_page] [-t field_term] [-r row_term]
[-i input_file] [-o output_file] [-a packet_size]
[-S server_name[/instance_name]] [-U login_id] [-P password]
[-T] [-v] [-R] [-k] [-E] [-h "hint [,...n]"]
虽然这么多参数,常用到的并不多
eg: 在系统cmd下
1、将 table_1 的数据输出到 data_1.txt 里
E:/temp>bcp DB1.dbo.Table_1 out data_1.txt -c -t "|" -r /n -U sa -P password
2、然后将 data_1.txt 复制到DB2所在的server
3、将 data_1.txt 的数据导入到DB2
E:/temp>bcp DB2.dbo.Table_2 in data_1.txt -b 5000 -c -t ",|" -r /n -U sa -P password
这一步也可以用 sql查询分析器 执行
BULK INSERT tmk_order_test1
FROM 'e:/temp/data_6.txt'
WITH
(DATAFILETYPE = 'char',
FIELDTERMINATOR = ',|',
ROWTERMINATOR = '/n' ,
FIRE_TRIGGERS
)
OK
下面来说一说用到的参数
Query
是返回一个结果集的 Transact-SQL 查询。如果查询返回多个结果集,例如指定 COMPUTE 子句的 SELECT 语句,只有第一个结果集将复制到数据文件,随后的结果集被忽略。使用双引号引起查询语句,使用单引号引起查询语句中嵌入的任何内容。在从查询中大容量复制数据时,还必须指定 queryout。
in | out | queryout | format
指定大容量复制的方向。in 是从文件复制到数据库表或视图,out 是指从数据库表或视图复制到文件。只有从查询中大容量复制数据时,才必须指定 queryout。根据指定的选项(-n、-c、-w、-6 或 -N)以及表或视图分隔符,format 将创建一个格式文件。如果使用 format,则还必须指定 -f 选项。
大容量复制选项 | bcp 实用工具开关 | BULK INSERT 子句 |
---|---|---|
字符模式格式 | -c | DATAFILETYPE = 'char' |
字段终止符 | -t | FIELDTERMINATOR |
行终止符 | -r | ROWTERMINATOR |
-b batch_size
指定所复制的每批数据中的行数。每个批处理作为一个事务复制至。SQL Server 提交或回滚(在失败时)每个批处理的事务。默认情况下,指定的数据文件中的所有数据都作为一批复制。请不要与 -h "ROWS_PER_BATCH = bb" 选项一起使用。