sqlserver大批量更新表数据

每当我们更新表时,数据少的时候可以直接 
update tableName set col1 = N'XXX' where--(用的是台湾的数据库,N是实现大小写转换,普通数据库可忽略)

而当更新的数据量过大,由于以上语句会类似一个事物长期执行,则高并发时其他访问到此表的时候就会造成死锁或者一直等待,因此会因此引发不可预想的后果。

解决方案有两个:

1、大家平常经常用的自己写一个程序去执行

2、通过sql执行

我下面将是我在工作中的sql执行

-- 原始语句 ----------------------------------------------------------------------------------------
--UPDATE a SET a.COL1 = b.ManageCode --收件地编码
--FROM tableName1 a 
--JOIN tableName2 b ON b.Company = a.COL2
--WHERE 


-- 等效方法 ========================================================================================
-- 这个方法不会造成大面积阻塞,也就不会造成大面积卡顿。
-- 理解:本质上是将一个大事务分解为多个小事务。
-- 所以以下语句不能有外层事务。
SELECT a.sys_guid/*待修改表的主键*/, ManageCode/*每行应取的目标值*/
  INTO #tmp
  FROM TA_Logistics a 
JOIN TB_CompanyJJ b ON b.Company = a.Col_051
WHERE createDT >= '2016-06-01' AND Col_076 < '2016-11-02' 

SELECT TOP(0) * INTO #tmp1 FROM #tmp t;
CREATE CLUSTERED INDEX CX_tmp1 ON #tmp1(sys_guid);

WHILE(1=1)
BEGIN
	-- TOP(200) 是用来限定单次循环中修改的数据量
	DELETE TOP(200) t OUTPUT Deleted.* INTO #tmp1 FROM #tmp t;
	IF(@@ROWCOUNT = 0) BREAK;

	-- 这里要注意保证更新的行数不会因为关联产生更多。这也是临时表中存的是目标表的主键的原因。
	UPDATE a SET a.Col_442 = t.ManageCode
	FROM TA_Logistics a 
	JOIN #tmp1 t ON a.sys_guid = t.sys_guid;

	TRUNCATE TABLE #tmp1;

	-- 每次循环后等待一小段时间,让其它会话也能干活。这样更不容易引起长时间大面积的阻塞。
	--	 同时这也有助于降低磁盘繁忙度。
	WAITFOR DELAY '0:0:0.2';
END

TRUNCATE TABLE #tmp;
DROP TABLE #tmp;
DROP TABLE #tmp1;

希望能对大家有帮助,同时也是我自己知识积累的一部分,后续用到的话可以直接更改引用,更改对应标示就行了

当在 SQL Server 中进行大量数据更新时,可能会遇到性能瓶颈,导致操作速度变慢。这可能是由于以下几个原因: 1. **索引的影响**:如果没有适当的索引,更新操作可能需要全扫描,这会大大降低效率。确保针对频繁更新的字段创建了合适的索引。 2. **行级锁**:更新操作通常会锁定被更新的行,如果同时有其他并发请求,可能会造成阻塞,特别是行级锁比范围锁更消耗资源。 3. **事务大小**:一次性尝试更新数据量过大,可能导致事务过大,超出服务器的内存限制,这时可以考虑分批处理。 4. **网络延迟**:如果是通过网络从远程服务器或集群传输数据,网络延迟也会影响性能。 5. **存储引擎和配置**:不同类型的存储引擎(如行式存储引擎如InnoDB vs. 列式存储引擎如ColumnStore)对大数据操作的优化程度不同。检查SQL Server配置,如日志记录、内存分配等是否适当。 6. **数据库分区**:对于大,分区可以改善更新性能,但如果分区设计不合理,反而会增加复杂性。 7. **硬件性能**:检查服务器的CPU、内存、硬盘I/O等硬件是否能满足大规模更新的需求。 解决这些问题的方法包括: - 分批次更新 - 优化SQL查询,使用UPDATE JOIN或TVF(Table Value Function) - 调整事务大小 - 重新评估索引策略 - 使用分区和并行更新 - 如果可能,考虑升级硬件
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值