用bcp导入大量数据（代替INSERT）

最新推荐文章于 2022-07-22 14:40:56 发布

weixin_30538029

最新推荐文章于 2022-07-22 14:40:56 发布

阅读量192

点赞数

文章标签： c#

原文链接：http://www.cnblogs.com/yushiro/archive/2010/08/13/1799095.html

版权

　　写代码的时候，经常需要大量的SQL数据来测试代码性能，如果用INSERT方式，一行一行的插入到测试表，效率非常低下，开多线程最多也就每秒几千行记录的速度。

　　之前用BCP批量导出导入数据的时候，就想到自己构造bcp的数据，然后批量导入，速度非常快，每秒至少几万行～几十万行的数据。

　　构造bcp数据的过程很简单，写段C#代码，产生一个txt文件，不过需要注意一下几点注意事项

参考《bcp导入导出数据发生异常解决方案》
若字段是NULL值，需要转换成\0
建议不要使用默认的\t作为Field的分隔符，因为不方便人工查看C#生成的数据文件，是否少了什么字段，或者多了什么关键字
bcp命令有-w 和-c模式，要与生成的txt文件格式匹配， -w 对应txt文件为Unicode， -c 对应txt文件为ANSI

　　然后用bcp in导入，一般来说，总会遇到些错误，稍微修正一下数据格式，就能正确导入了（bcp导入2进制数据还没研究过，只能针对都是string和int类型的字段）

转载于:https://www.cnblogs.com/yushiro/archive/2010/08/13/1799095.html

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_30538029

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

BCP命令导入导出数据

11-13

BCP批量导入excel数据到sqlserver相关资料整理

bcp 导入数据

mendeliangyang的专栏

08-30

867

最近项目中遇到一些问题，需要将以前系统的数据导入现在开发的系统中，表结构还不一致。不过幸好有bcp。解决方法 1，讲原系统数据导出成excel 格式。 2，根据现在系统的数据库表结构调整 excel 列的数据。 3，讲excel copy到txt中。 4，执行bcp导入数据命令。 bcp dbname.dbo.tableName in d:\data.txt -Uuser -P

参与评论您还未登录，请先登录后发表或查看评论

BCP 高效批量导入

weixin_34342992的博客

07-16

198

将oledb读取的excel数据快速插入的sqlserver中，很多人通过循环来拼接sql，这样做不但容易出错而且效率低下，最好的办法是使用bcp，也就是System.Data.SqlClient.SqlBulkCopy 类来实现。不但速度快，而且代码简单，下面测试代码导入一个6万多条数据的sheet，包括读取（全部读取比较慢）在我的开发环境中只需要10秒左右，而真正的导入过程只需要4.5秒。 ...

使用 bcp 导入导出数据

05-25

2015

bcp 实用工具可以在 Microsoft SQL Server 2005 实例和用户指定格式的数据文件间大容量复制数据。使用 bcp 实用工具可以将大量新行导入 SQL Server 表，或将表数据导入数据文件。除非与 queryout 选项一起使用，否则使用该实用工具不需要了解 Transact-SQL 知识。若要将数据导入表中，必须使用为该表创建的格式文件，或者必须了解表的结构以及对于该表

bcp 可以实现数据的导入导出

gengwei80的专栏

08-11

1228

bcp 实用工具在 Microsoft® SQL Server™ 2000 实例和数据文件之间以用户指定的格式复制数据。语法bcp {[[database_name.][owner].]{table_name | view_name} | "query"}??? {in | out | queryout | format} data_file??? [-m max_errors] [-f fo

BCP 大容量数据导入导出工具使用步骤

12-15

主要讲四个示例的使用：导出（out），导入（in），查询导出（queryout），导出格式化（-f）文件...代码如下:bcp AdventureWorks.sales.currency out c:currency1.txt -c -T –使用信任连接示例3：导入数据代码如下:b

bcp—SQLServer命令行数据导入导出工具使用总结.txt

06-16

bcp是微软SQLServer数据库系统的命令行工具，用于进行大数据量的导入导出，该工具简单实用、效率极高，本文总结了bcp命令操作的各种设置开关功能含义和使用方法，可以为需要的用户提供有益帮助。

SQL_Server数据导入导出工具BCP详解

03-08

- 避免索引：在导入数据时，禁用目标表上的索引以减少写入开销。 - 事务控制：通过`-k`保持事务，以便在导入失败时回滚。 - 错误处理：使用`-e`指定错误日志文件，记录导入过程中遇到的问题。 ### 注意事项 - 数据...

SQLserver利用bcp导入导出大容量数据-SQL脚本

weixin_40412301的博客

07-22

1367

SQLserver中利用bcp大容量导入导出

bcp、BULK INSERT 和 OPENROWSET(BULK)

sage425的专栏

11-17

2466

bcp（大容量复制程序）实用工具BULK INSERT 以用户指定的格式将数据文件加载至数据库表或视图中。OPENROWSET 大容量行集提供程序goif exists (select * from sys.objects where object_id=object_id(N'Users'))drop table Userscreate table Users(imgName VARCHAR(100),name VARCHAR(100),intro VARCHAR(100))select * from U

用c#中实现的，调用cmd来执行bcp的代码

dengyaodan4115的博客

10-30

139

用c#中实现，调用cmd来执行bcp的代码，大家共享！引用空间：using System;using System.Data;using System.Data.SqlClient;using System.Diagnostics;private void Page_Load(object sender, System.EventArgs e) { /...

BCP和BULK INSERT比较

rgb_rgb的博客

01-17

3577

原文：http://blog.csdn.net/jackmacro/article/details/5959321 经过比较bulk insert 效率更高 BCP运行的SQL: insert bulk test.[dbo].tb1([ContractNumber] varchar(20) collate Chinese_PRC_CI_AS,[DeptType] int, [Categor

用c#中实现的，调用cmd来执行bcp

weixin_30737363的博客

05-11

190

引用空间： using System; using System.Data; using System.Data.SqlClient; using System.Diagnostics; private void Page_Load(object sender, System.EventArgs e) { // 在此处放置用户代码以初始化页面 ...

BCP和Bulk into 命令使用（待整理更新）

weixin_30301449的博客

06-30

159

BCP和Bulk into 命令使用（待整理更新） BCP和Bulk into 命令使用（待整理更新） bcp命令是SQL2005 一个实用的数据导出导入工具，我们可以运用这个命令方便的到处导入数据首先我们欣赏一下bcp命令的格式： BCP是SQL Server中负责导入导出数据的一个命令行工具，它是基于DB-Library的，并且能以...

.bcp文件解析为mysql_c#使用BCP命令将数据从数据库导出

weixin_32033241的博客

01-26

239

以sqlserver为例，将sqlserver中的数据导入到excelSqlConnection conn=new SqlConnection("server=localhost;uid=sa;pwd=sqlserver;database=test");//连接数据库//其中"test"为数据库名，"excel"为表名，严格表名，即使用：数据库名.dbo.表名string genExcelCom...

bcp操作

Steven's Blog

07-08

738

以前在百度空间写的文章，搬到csdn上来 1、使用示例 bcp jhzp.dbo.jobrencai out c:\currency1.txt -c -U"sa" -P"123456" 导出 http://hi.baidu.com/quandang/blog/item/f795ef393076e13697ddd8a9.html http://msdn.microsoft.com/en-us

在BCB中使用多线程 ( 转载 )

03-13

2116

多线程编程是提高系统资源利用率的一种常见方式。它占用的资源更小，启动更快，还可以实现在后台运行一些需时较长的操作。一、初识TThread对象VCL提供了用于多线程编程的TThread类，在这个类中封装了Windows关于线程机制的Windows API，通常将它的实例成为线程对象。线程对象通过封装简化了多线程应用程序的编写。注意，线程对象不允许控制线程堆栈的大小或安全属性。若需要控制这些，必须使

BCP导入导出 (GOOD)

studyvcmfc的专栏

06-30

1521

<br /><br />BCP导入导出 <br />　　bcp命令是SQL Server提供的一个快捷的数据导入导出工具。使用它不需要启动任何图形管理工具就能以高效的方式导入导出数据。bcp是SQL Server中负责导入导出数据的一个命令行工具，它是基于DB-Library的，并且能以并行的方式高效地导入导出大批量的数据。bcp可以将数据库的表或视图直接导出，也能通过SELECT FROM语句对表或视图进行过滤后导出。在导入导出数据时，可以使用默认值或是使用一个格式文件<br />将文件中的数据导入到数据

SQL2005 bcp命令详解：高效数据导入导出

"这篇资料介绍了SQL2005中bcp命令的使用，这是一个用于批量导入和导出数据的强大工具。bcp命令可以方便地处理大量数据，支持在控制台直接执行，也可以通过调用系统存储过程xp_cmdshell来运行。文件主要涵盖了bcp命令...