“UPS炸机”事故案例学习分享

1. 案例背景

某数据中心按照国标《GB50174-2017》的A级标准设计建设，基础设备均为一线品牌。投入运行后设备均正常。当运维团队执行外电中断的的应急演练时，出现UPS”炸机“，用户以为是UPS设备的问题，经厂家修复后，再次测试，UPS又”炸机“，有电弧光和强烈的声响，并且其它设备也同时发生故障。其它损坏设备还包括：机房空调面板电源、机房安全疏散指示灯、两个DDC电源模块、高压直流屏等。

2. 事故分析

种种迹象表明，肯定不是UPS设备引起的事故，初步判断供电线出现异常电源质量的情况，以至于相当部分的用电设备集中出现故障。

UPS历史数据分析： UPS旁路电压的瞬时值偏高到300V以上（正常值为220V），即供电回路上的电压异常地偏高。推断并认为数据中心在发电机供电期间曾经出现异常的高电压，导致包括UPS在内的多种设备电源模块受损，有的还导致严重的“二次”故障。

发电机数据分析：事故是发生在发电机供电切换中，但是发电机也有运行告警记录，也有运行数据记录，记录均显示发电机正常运行过程中，输出端发现短路告警，发电机紧急停机。显然不是发电机引起的异常高压。

3. 事故原因查找

数据中心电气系统架构：从10KV市电进线到末端IT设备供电回路，全链路采用2N结构并且较好地实现了“物理隔离”。IT机柜设计功率密度为5KW/机柜，本期建成的机柜数近千个。下图仅画出A链路，B链路同理。

对上述系统范围内的设备配置一一进行核实，发现一处可疑的地方：本项目现场共安装了十二台变压器，容量为2000KVA、2500KVA不等，分别用于IT设备、动力设备的供电，在出现“炸机”事故的两次切换演练中，运维团队都对多台变压器进行了投切，其中一次“炸机”正是在第十台投入运行后发生的。而本期的设计和建设范围是三台发电机+前六台变压器，二期建设时要再增加四台发电机（与一期发电机组成并机系统），才能配备六台变压器（如下图中标识为“预留”的变压器）。

显然，多投入的变压器是罪魁祸首，这里存在着信息不对称的问题，设计意图与使用意图不相匹配；导致切换演练方案不合理，引起的事故。

4. 事故原因解疑

上面的电气系统架构还是没有解释异常的高电压从哪里来？谁是故障的始作俑者。

第一个因素: 一个由多台并联的空载UPS组成的受电系统呈现怎么样的负载特性？UPS设备自带功率因素校正电路，输入功率因素0.9以上，接近纯阻性。但连续检查了多台UPS的显示面板，发现“功率因素”一项在空载情况下均显示为-0.15～-0.30，而并联UPS组所在供电回路上安装有电容补偿柜，柜体面板上显示各相“无功功率”约为75Kvar，“功率因素”为-0.15，很明显整个回路上的负载特性呈容性。只有当UPS输出端加载一定负荷后，UPS输入端的功率因素校正电路才会工作。这个数量级别的容性负载对市政电网当然不是什么“负担”，但是对由三台发电机组成（第一次演练时只有一台发电机）的一个后备电源而言，就是另当别论了。

结论:当UPS空载运行时，UPS是呈容性负载特性。

第二个因素：数据中心取消了UPS输入断路器的“失压脱扣”功能。相当于每次供电中断后的重新合闸，变压器都是带着全部运行中的UPS通电，每个变压器的投运都是对后备发电机的一次“冲击”考验，而且随着投运的变压器数量越多，系统的容性负载量越大，“冲击”的幅度也就越大。

结论：变压器+UPS的容性负载特性直接带载对发电机有冲击，且负载越大，冲击越大。

第三个因素：发电机在突加容性负载时会由于容性负载的增磁作用出现输出电压上升的情况，只是发电机受磁路饱和的影响，输出电压在进入饱和阶段后其升高幅度受磁路磁通密度的限制，发电机输出电压不超过额定电压的140%，在磁路饱和后，即使发电机被增磁或者继续加大励磁电流，发电机端电压上升有限。利用示波器我们在UPS的输入端也监测到类似的情况，发电机供电后，每当一个变压器合闸投入运行，输入电源的电压波形都会经历一段“幅度偏高”后才回复正常，而且随着投运变压器数量的增加，电压波形“幅度偏高”的情况更为严重，在UPS“炸机”前监测到的电压峰值达到690V，而UPS EMI电路板上压敏电阻的耐压值只有620V。显然，正是这样形成的“异常高电压”由发电机输出到各用电设备，造成元器件的击穿，而UPS击穿器件的碎屑飞溅到机器内部，造成短路拉弧与烧灼的严重后果。

结论：发电机+变压器投入运行，造成的 “异常高电压”。

5. 事故个人学习总结

事故原因也很明确了，从此次事故也学习到了许多知识。比如带有PFC功能的设备在空载时，是呈容性特性，容性负载的增磁作用，会使输出电压升高。发电机和容性负载匹配的会增大输出电压，增大比例和容性负载的容量有关。通过此案例的学习，可以在售前设计时及数据中心运维时避免此类情况的发生。

思考：假如UPS是带载运行，呈非线性负载的特性，是不是可以避免呢？

来源：UPS售前指南