SqlBulkCopy - The given value of type String from the data source cannot be converted to type

最新推荐文章于 2021-01-24 09:54:27 发布
最新推荐文章于 2021-01-24 09:54:27 发布
阅读量4.3k 收藏
点赞数
分类专栏： SqlBulkCopy EXCEL 文章标签： c#
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012013791/article/details/105032525
版权
本文介绍了在使用C#的SqlBulkCopy进行批量数据插入时，遇到的字符串类型转换错误问题及其解决方案。内容包括批量插入Excel数据时的数据类型不匹配问题，以及如何去除非数据行。作者提供了错误原因分析和相应的代码示例，帮助开发者解决此类问题。
摘要由CSDN通过智能技术生成

SqlBulkCopy - The given value of type String from the data source cannot be converted to type of the specified target column

针对使用C#SqlBulkCopy对象遇到的问题总结
1.批量插入excel数据遇到的类型转换问题
2.去除非数据行

以下是对应的解决办法及代码
1.批量插入数据报错两种可能，第一填写字段对应关系的时候可能有重复的，第二是数据的字段长度不足（这个需要注释一些字段然后慢慢放开注释找到出错的字段）
2.第二个直接上代码
注：ColumnMapping 是自己手动创建的excel列名与数据库对应表的列名一一对应的类

/// <summary>
        /// 
        /// </summary>
        /// <param name="P_str_Excel">excel file name</param>
        /// <param name="P_str_SheetName"></param>       
        public void ImportDataToSql(string P_str_Excel, string DestinationTableName, ColumnMappingCollection collectionMapping, bool ifClearContent = false)
        {
            //DataSet myds
最低0.47元/天 解锁文章
致我们的青春
关注
专栏目录
java sqlbulkcopy使用_Java使用SQLServerBulkCopy实现数据库批量操作
weixin_34173125的博客
02-16 820
Microsoft SQL Server 的bcp命令可以快速将大型文件复制插入到数据库中，C#提供了SqlBulkCopy方法实现该功能，而在java中可以通过SQLServerBulkCopy类实现类似的功能，且相对于insert、update等命令来说，这个类的效率要高的多。(对比常用的JDBC的Batch方法也高的多)。SQLServerBulkCopy类只能用于对SQL Sever数据库...
AzureDataFactory The given value of type String from the data source cannot be converted to type
最新发布
Vic的博客
03-11 643
客户有需求要将Dataverse中的数据抽出来放到数仓中为后续进行数据分析做准备，在给客户出具了多种方案后，客户选择了使用AzureDataFactory, 但这是个收费的工具，所以客户需要知道大概的费用，以及配置及后续运维的复杂度，那就做个POC吧。Sink就是Target，你要写入的库，新建一个，填入连接的数据库服务器，数据库及SA的用户名和密码，写入类型一般都是Upsert并指定唯一键值字段名。配置完后验证下有没有错误，然后就是发布，最后就是设置什么时候触发，测试的时候直接立即触发。
错误：Cannot convert value of type 'java.lang.String' to required type 'javax.sql.DataSource'
veritable的博客
04-02 6731
运行SSM项目时在ApplicationContext.xml文件中出现了这个错误,检查了多次代码都没有问题，最终在一位大佬的博客中发现了自己的错误，这个问题是由于Spring依赖注入错误。控制台显示的错误是：不能将String类型转换为我们那块使用的DataSource类型的属性。 错误分析：我们在使用Spring依赖注入的时候，<bean/>标签的<property nam...
报错：“来自数据源的String类型的给定值不能转换为指定目标列的类型nvarchar。”
sinat_31773153的博客
08-07 5597
解决sql server批量插入时出现“来自数据源的String类型的给定值不能转换为指定目标列的类型nvarchar。”问题 问题的原因：源的一个字段值长度超过了目标数据库字段的最大长度 解决方法：扩大目标数据库对应字段的长度 一般原因是源的字段会用空字符串填充，导致字符串长度很大，可以使用rtrim去除 ...
Cannot convert value of type 'java.lang.String' to required type 'javax.sql.DataSource' for property
blocalhost的博客
03-27 5512
无法将你的datasource里配置的字符串转换成javax.sql.DataSource对象 Cannot convert value of type 'java.lang.String' to required type 'javax.sql.DataSource' for property 'dataSource': no matching editors or conversion st...
数据类型转换错误Failed to convert value of type ‘java.lang.String‘ to required type ‘j
m0_49194578的博客
01-24 1万+
字面意思大概是和类型转换有关 先检查一下自己的类型是否匹配数据库 和domain中的类是否匹配 再者就检查一下自己每个层面的传参是否出现了问题， 我这里是大小写出错了 查的过程中发现别的方法也可能造成这样的错误 1：服务器传回的date是字符串，而接收的是date类型，反之也是一样 2：/没有写paramType = “path” 会提示类型转换String convert to Long错误。 ...
Insert-Excel-data-to-DB.rar_Asp.net Excel
09-23
这个"Insert-Excel-data-to-DB.rar_Asp.net Excel"压缩包可能包含了一个示例项目或者教程，用于演示如何高效地完成这个过程。下面我们将深入探讨这个主题。 首先，我们需要了解基础概念。ASP.NET是微软开发的一种...
将SQL批量复制与LINQ-to-SQL数据上下文一起使用
04-07
标题 "将SQL批量复制与LINQ-to-SQL数据上下文一起使用" 描述了如何在C#编程环境中，利用.NET Framework 4中的LINQ-to-SQL技术进行大规模数据的高效导入。这一主题对于处理大量数据的数据库操作尤其重要，因为它可以...
How to save data from a DataSet into a T-SQL table
11-06
通过设置SqlCommand的CommandText为多个INSERT语句，或者使用SqlBulkCopy类进行大容量数据导入。 6. **事务处理**：为了确保数据的一致性，可以使用SqlTransaction来包裹INSERT操作。如果在处理过程中发生错误，...
使用SqlBulkCopy时应注意Sqlserver表中使用缺省值的列
09-11
在使用SqlBulkCopy类进行大量数据导入到SQL Server时，我们需要注意一些关键点，特别是当数据库表中包含默认值的列时。SqlBulkCopy是一种高效的方法，它允许开发者快速地将大量数据从一种数据源（如CSV文件）批量...
ssis 映射列 使用变量_SSIS中的动态列映射：SqlBulkCopy类与数据流
culuo4781的博客
07-18 1711
ssis 映射列 使用变量 The Data Flow Task is an essential component in SQL Server Integration Services (SSIS) as it provides SSIS ETL developers with an ability to conveniently extract data from various dat...
Spring Boot 升级所遇到的坑们s 1.5.x升级到2.1.x
04-08 5617
阅读目录 Spring Boot 版本升级 Spring Cloud版本升级（若没有使用到Spring Cloud，可以忽略这段） Zuul升级后在maven中找不到依赖的报错 SpringBoot升级后ErrorController 类的package包位置变化导致报错 JPA升级后 save方法报错： JPA升级后 findOne方法报错： JPA升级后 delete方法报错： ...
MYSQL— perror 错误码详情
热门推荐
道行尚浅（老道）的博客
12-04 11万+
[root@localhost ~]# cat test_nothread.py import paramiko import threading import os def ssh2(ip,username,passwd,cmd): file_path='/root/perror.log' logfile=file(file_path,'a') try:
The method update(String, Object...) from the type JdbcTemplate refers to the missing type DataAcces
万万没想到鲁大师
07-29 4727
The type org.springframework.dao.DataAccessException cannot be resolved. It is indirectly referenced from required .class files The method update(String, Object...) from the type JdbcTemplate refer
C#使用SqlBulkCopy批量更新数据
ltolll的博客(技术版)
08-23 2万+
相关链接： http://blog.csdn.net/codetian/article/details/2948679 http://msdn.microsoft.com/zh-cn/library/system.data.datacolumn.datatype(v=vs.100).aspx SqlConnection sqlCon = new SqlConnection(sql
使用SqlBulkCopy进行批量插入数据时踩过的坑
Sunday9528
06-21 7970
之前一直都没用过SqlBulkCopy关键字进行数据插入，更没了解过。 事因：因业务需要在数据表中添加两列，然后将数据插入进表中 之前都是这样写的 dt.Columns.Add(new DataColumn(“sComment”, typeof(string))); 等等一一写出 然后再一一赋值 dt.Rows[i][“sComment”] = tempBill.sComment; 可...
SqlServer 插入Excel数据方法--SqlBulkCopy避免重复
06-11
要将Excel数据插入SqlServer中并避免重复数据，可以使用以下步骤： 1. 将Excel数据读取到DataTable中。 2. 在DataTable中检查是否存在重复数据，如果存在则删除重复数据。 3. 使用SqlBulkCopy将数据插入到SqlServer中。 以下是示例代码： ```csharp using System.Data; using System.Data.OleDb; using System.Data.SqlClient; //连接Excel文件 string connString = "Provider=Microsoft.ACE.OLEDB.12.0;Data Source=D:\\sample.xlsx;Extended Properties=\"Excel 12.0;HDR=YES;IMEX=1\""; OleDbConnection excelConn = new OleDbConnection(connString); excelConn.Open(); //读取Excel数据到DataTable中 string sql = "SELECT * FROM [Sheet1$]"; OleDbDataAdapter adapter = new OleDbDataAdapter(sql, excelConn); DataTable excelData = new DataTable(); adapter.Fill(excelData); excelConn.Close(); //检查是否存在重复数据 for (int i = excelData.Rows.Count - 1; i >= 0; i--) { DataRow row = excelData.Rows[i]; if (IsDuplicate(row)) { excelData.Rows.Remove(row); } } //将数据插入到SqlServer中 string sqlServerConnString = "Data Source=.;Initial Catalog=TestDB;Integrated Security=True;"; SqlConnection sqlServerConn = new SqlConnection(sqlServerConnString); sqlServerConn.Open(); SqlTransaction tran = sqlServerConn.BeginTransaction(); try { using (SqlBulkCopy bulkCopy = new SqlBulkCopy(sqlServerConn, SqlBulkCopyOptions.Default, tran)) { bulkCopy.DestinationTableName = "Person"; bulkCopy.ColumnMappings.Add("Name", "Name"); bulkCopy.ColumnMappings.Add("Age", "Age"); bulkCopy.WriteToServer(excelData); } tran.Commit(); } catch (Exception ex) { tran.Rollback(); throw ex; } finally { sqlServerConn.Close(); } //检查是否存在重复数据的方法 private bool IsDuplicate(DataRow row) { string name = row["Name"].ToString(); int age = int.Parse(row["Age"].ToString()); string sql = "SELECT COUNT(*) FROM Person WHERE Name=@Name AND Age=@Age"; using (SqlConnection conn = new SqlConnection(sqlServerConnString)) { SqlCommand cmd = new SqlCommand(sql, conn); cmd.Parameters.AddWithValue("@Name", name); cmd.Parameters.AddWithValue("@Age", age); conn.Open(); int count = (int)cmd.ExecuteScalar(); if (count > 0) { return true; } else { return false; } } } ``` 以上代码中使用了IsDuplicate方法来检查是否存在重复数据，该方法查询了目标表中是否存在相同的Name和Age值。如果存在则返回true，否则返回false。在使用SqlBulkCopy插入数据时，应该先将Excel数据读取到DataTable中，然后在DataTable中检查是否存在重复数据，最后再将数据插入到SqlServer中。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值