数据中心基础环境方案规划与设计

1、 描述数据中心功能定义及建设要求

功能定义：数据中心是指在一个物理空间内实现集中处理、存储、传输、交换及管理。

建设要求：

（1）性能要求：

A级数据中心的基础设施宜按容错系统配置，在电子信息系统运行期间，基础设施应在一次意外事故后或单系统设备维护或检修时仍能保证电子信息系统正常运行。

当两个或两个以上地处不同区域的数据中心同时建设，互为备份，且数据实时传输、业务满足连续性要求时，数据中心的基础设施可按容错系统配置，也可按冗余系统配置。

B级数据中心的基础设施应按冗余要求配置，在电子信息系统运行期间，基础设施在冗余能力范围内，不得因设备故障而导致电子信息系统运行中断。

C级数据中心的基础设施应按基本需求配置，在基础设施正常运行情况下，应保证电子信息系统运行不中断。

（2）选址：

数据中心选址应符合下列规定：

1电力供给应充足可靠，通信应快速畅通，交通应便捷；

2采用水蒸发冷却方式制冷的数据中心，水源应充足；

3自然环境应清洁，环境温度应有利于节约能源；

4应远离产生粉尘、油烟、有害气体以及生产或贮存具有腐蚀性、易燃、易爆物品的场所；

5应远离水灾、地震等自然灾害隐患区域；

6应远离强振源和强噪声源；

7应避开强电磁场干扰；

8A级数据中心不宜建在公共停车库的正上方；

9大中型数据中心不宜建在住宅小区和商业区内。

设置在建筑物内局部区域的数据中心，在确定主机房的位置时，应对安全、设备运输、管线敷设、雷电感应、结构荷载、水患及空调系统室外设备的安装位置等问题进行综合分析和经济比较。

（3）气流组织

主机房空调系统的气流组织形式应根据电子信息设备本身的冷却方式、设备布置方式、设备散热量、室内风速、防尘和建筑条件综合确定，并应采用计算流体动力学对主机房气流组织进行模拟和验证。当电子信息设备对气流组织形式未提出特殊要求时，主机房气流组织形式、风口及送回风温差可按表7.3.1选用。

（4）空调系统：

对单台机柜发热量大于4kW的主机房，宜采用活动地板下送风（上回风）、行间制冷空调前送风（后回风）等方式，并宜采取冷热通道隔离措施。

采用冷冻水空调系统的A级数据中心宜设置蓄冷设施，蓄冷时间应满足电子信息设备的运行要求；控制系统、末端冷冻水泵、空调末端风机应由不间断电源系统供电；冷冻水供回水管路宜采用环形管网或双供双回方式。当水源不能可靠保证数据中心运行需要时，A级数据中心也可采用两种冷源供应方式。

（5）供配电：

后备柴油发电机组的性能等级不应低于G3级；A级数据中心发电机组应连续和不限时运行，发电机组的输出功率应满足数据中心最大平均负荷的需要。B级数据中心发电机组的输出功率可按限时500h运行功率选择。

柴油发电机应设置现场储油装置，储存柴油的供应时间应按本规范附录A执行。当外部供油时间有保障时，储存柴油的供应时间宜大于外部供油时间。柴油在储存期间内，应对柴油品质进行检测，当柴油品质不能满足使用要求时，应对柴油进行更换。

（6）网络与布线系统

数据中心的辅助区、支持区和行政管理区布线系统设计应符合现行国家标准《综合布线系统工程设计规范》GB50311的有关规定。

数据中心布线系统应支持数据和语音信号的传输。

数据中心布线系统应根据网络架构进行设计。设计范围应包括主机房、辅助区、支持区和行政管理区。主机房宜设置主配线区、中间配线区、水平配线区和设备配线区，也可设置区域配线区。主配线区可设置在主机房的一个专属区域内，占据多个房间或多个楼层的数据中心可在每个房间或每个楼层设置中间配线区，水平配线区可设置在一列或几列机柜的端头或中间位置。

承担数据业务的主干和水平子系统应采用OM3/OM4多模光缆、单模光缆或6A类及以上对绞电缆，传输介质各组成部分的等级应保持一致，并应采用冗余配置。

（7）消防与安全

数据中心的耐火等级不应低于二级。

A 级数据中心的主机房宜设置气体灭火系统,也可设置细水雾灭火系统。当A级数据中心内的电子信息系统在其他数据中心内安装有承担相同功能的备份系统时,也可设置自动喷水灭火系统。

B级数据中心和C级数据中心的主机房宜设置气体灭火系统,也可设置细水雾灭火系统或自动喷水灭火系统。

总控中心等长期有人工作的区域应设置自动喷水灭火系统。

2、 进行数据中心总体功能区域划分

（1）计算机房。计算机房是数据中心的核心区域，用于计算、存储、网络设备等关键设备以及其配套的机柜系统。

（2）操作中心。用于计算机房设备运行、环境、安全、消防集中监控的场所。

（3）储藏间和装载间。用于设备的临时存放以及设备上架、软件上线前的安装、调试区域。

（4）供电和机械间。用于变配电系统、柴油发电机、UPS、电池组、空调外机等设备存放。

（5）员工办公室。用于日常行政管理的场所。

3、 进行布线子系统设计

（1）设计原则

在整个数据中心的实施过程中，综合布线系统的生命周期最长，甚至等同于建筑物的生命周期。要承受未来的网络流量及越来越复杂的网络管理，这就需要基于正确的设计理念来完成。

综合布线系统首先要依据标准，严格按照规范进行设计;其次要充分实现增加和改动的灵活性和可扩展性，综合考虑将来所需求的高性能和高带宽，充分预留扩展空间;数据中心发展趋势是数据越来越集中，要求数据处理的速度更快，要确保在相当的一段时间内，无须更换或升级布线系统。

现在布线系统从以服务器为中心发展到以存储为中心，要考虑对存储设备的有效支持。宜采用CMP防火等级线缆，既要注意美观的布线，同时又要防止背后隐藏的外来串扰的威胁，线缆敷设时，避免过紧捆扎、超量的通道填充容量和过于弯曲。规划设计时尽量做到以最小的空间实现最大的应用，通过高密度配线架等设备的使用来节约空间。CMP是最高电缆安全等级，具有完美阻燃能力，散发烟雾和毒素很低。

（2）拓扑结构

数据中心的通信空间主要包括接入室、主配线区(MDA)、水平配线区(HDA)、区域配线区(ZDA)和设备配线区(EDA)。

接入室。是管理外部网络与数据中心结构化布线系统的接口，这里摆放着用于外部网络和数据中心分界的硬件设备。考虑到数据中心的安全，接入室一般放在计算机机房的外面。如果网络供应商较多，可以有多个接入室。

主配线区。是数据中心的中心区域，这里是数据中心结构化布线系统配线点的位置所在。数据中心至少要有一个主配线区。数据中心网络的核心路由器和核心交换机通常在主配线区内部或邻近主配线区。

水平配线区。是支持布线到设备配线区的一个空间，它是支持终端设备的局域网、存取区域网络和KVM交换机的位置所在。如果机房较小的话，主配线区可以被附近的设备或者机房当成水平配线区使用。

区域配线区。是用于水平配线区与终端设备间需要灵活配置的地方，比如天花板上方或地板下方。通常区域配线区仅放置无源设备。

设备配线区。通常是放置终端设备，包括计算机系统和通信设备的区域。

（3）设备选型

布线系统在设备选型时有几个着重关注点：

1)拟选择模块化的配线架以灵活配置端接数量，既减少端口浪费又便于日后的维护变更。拟使用高密度配线架来提高机柜的使用密度，节省空间。

2)用颜色来区分不同网络的跳线﹔跳线性能指标应满足相应标准的要求；拟采用高密度的铜缆和光纤跳线，以提高高密度环境的插拔准确性和安全性。

3)选择具有长久使用寿命的设备，尽量减少占用空间，使系统具有更好的传输容量及安全阻燃性，提供多种颜色区分；拟选择的传输介质为6A类双绞线、多模光缆、单模光缆。

4)选择开放式的机架，来安装配线设备；选择封闭式的机柜，来安装网络设备、服务器和存储设备等；统一采用标准的19英寸的机架和机柜。预留足够的布线空间、线缆管理器、电源插座和电源线以确保充足的气流。

5)灵活使用水平线缆管理器和垂直线缆管理器，实现对机柜或机架内空间的整合，提升线缆管理效率，避免跳线管理的杂乱无章。

6)采用配线架、模块插盒和经过预端接的铜缆和光缆组件在内的预连接系统。以快捷地连接系统部件，实现铜缆和光缆的即插即用，减少变动的风险，节省空间，使管理和操作具有方便性、灵活性。

布线系统在工程实施过程中的几个关键点：

1)接地系统

常见的接地方式有两种。

第一种方式，数据中心的地面为架空地板时，使用铜牌将地板支架网状连接，同时将其连接到数据中心内的等电位接地点，机柜及机柜内的接地铜牌通过黄绿接地线或网状编织线连接到地板支架的接地点上，机柜内的铜缆配线架和设备通过黄绿接地线或网状编织线连接到机柜内的接地铜牌。

第二种方式，数据中心内部无架空地板或架空地板支架没有接地连接时，机柜及机柜内的接地铜牌则只能通过长距离的接地线连接到数据中心内的接地点。

2)机柜内施工特点

为了便于安装，机柜厂商常根据机柜内安装设备的不同配置形成各类机柜，如服务器机柜、网络机柜、控制柜、配线柜等。

服务器机柜的特点是进线孔相对较少且封闭性良好，同时机柜深度较大，便于设备安装。当大量的线缆需要进入服务器机柜时，由于进线孔较小，会在进线孔出现线缆挤压的情况，容易造成线缆损伤；线缆从两侧进入，导致进入机柜后靠近机柜正面的线缆在进入配线架时弯曲半径过小，影响线缆的传输效果。

配线柜的特点是机柜进线孔多且大，机柜内部都配有固定线缆的横担或理线器，一般两侧和机柜后部均可以进线，便于强、弱电分开走线，部分配线柜顶端还配有跳线，在出线孔便于维护。

3)桥架内施工特点

目前，数据中心常用的两类桥架是网格式桥架和半封闭式桥架。

网格式桥架具有可视性良好、易于理线等优势，常用的理线方式为普通的圆形扎带绑扎和依靠固线工具的方形绑扎。无论是否使用固线附件，线缆在出桥架时一定要使用防护附件。由于网格式桥架线缆进出方便，线缆防护附件往往被忽略，线缆在出线口的支撑仅靠网格式桥架上的一条钢架，在安装初期可能不会对线缆造成太大影响，但在长时间的重力作用下，出线口的底层线缆往往被挤压变形，进而影响使用。

与网格式桥架相比，半封闭式桥架的出现方式更为复杂，出线时需在保证线缆弯曲半径的前提下确保美观。常用的方式为做分支桥架或在桥架边缘开口，但前者浪费材料，而后者影响美观。但若在桥架外侧边缘加装一条U形导轨，线缆通过夹子固定在导轨上，在保证线缆弯曲半径的前提下也非常整齐、美观。

4)铜缆系统的安装特点

铜缆系统安装方式为现场安装方式和预端接方式。为了加快施工速度保证施工质量，大多选择了预端接铜缆或者集束跳线的形式安装。这类产品进行安装较为简单。

首先，要保证链路上所有的转弯处弯曲半径均大于规定值；其次，由于预端接线缆的外径较粗，比较容易保证平顺无交叉地理线；最后，将预端接铜缆双端配线架进行接地。

现场安装方式除了保证上述预端接铜缆的安装步骤外，还要保证线缆双端模块的正确端接目前，数据中心内的铜缆系统的传输速率已经或将要达到万兆水平，因此6A级或6A级以上的链路是数据中心的常规选择。

5)光缆系统的安装特点

相对于铜缆系统，数据中心内的光缆系统安装更为复杂，主要原因是外部环境和施工方式都对光纤性能有较大影响。以预端接光缆为例，首先要确保光纤主缆在桥架和机柜内的弯曲半径满足产品要求，且绑扎不能过紧（建议不要使用塑料扎带）；在光缆进入配线架时要固定稳妥；光纤配线架内的理线要整齐、无扭绞，尽量使用大的半径盘绕在配线架内并固定。

4、 进行监控子系统设计

将监控系统分为安防监控和环境监控。

（一）安防监控：

设计原则：

系统的防护级别与被防护对象的风险等级相适应，同时技防、物防、人防相结合，探测、延迟、反应相协调，既要满足防护的纵深性、均衡性、抗易损性要求，也要满足系统的安全性、可靠性、可维护性要求，还需兼顾系统的先进性、兼容性、可扩展性、经济性和适用性要求。

安全等级：

针对数据中心不同功能区域，可将安全保障定义为四个安全保障等级区域。

数据机房楼内的模块化机房及ECC区（监控中心区域）被定义为一级安全保障等级区；

机电设备区、动力保障区被定义为二级安全保障等级区；

运维办公区域被定义为三级安全保障等级区；

园区周界区域被定义为四级安全保障等级区。

主要监控子系统：

视频安防监控系统

出入口控制系统

入侵报警系统

电子巡更系统

安全防范综合管理系统

（二）环境监控：

数据中心的环境监控系统通常由监控主机、计算机网络、智能模块、协议转换模块、信号处理模块、多设备驱动卡及智能设备等组成。

目前的环境监控系统进一步增强了系统的报警功能，除现场的多媒体报警外，另设置了电话通知、短信通知、E-mail通知报警等，能适应现场无人值守的实时监控模式。

主要监控子系统：

UPS系统监控

精密空调系统监控

供配电系统监控

漏水监控

温湿度监控

消防监控

（三）具体设计

1.供配电开关监测

实时监测配电开关的通断电状态，一旦发生报警，系统将自动切换到相应的监控界面，且发生报警的开关会变成断开状态且变红显示，同时产生报警事件进行记录存储并有相应的处理提示，并第一时间发出短信进行报警。

1)    配电柜参数监测：监测配电柜的重要参数，包含但不限于三相电压、电流、电度、频率（可选）、功率、功率因数（可选）、有功功率（可选）、无功功率（可选）等，具体参数视配电柜设备具体情况而定；

2)    重要的参数曲线记录：系统可对重要参数进行记录，并通过历史曲线图中每天的电压、电流、频率（可选）、有功、无功的最大值、最小值、当前值及电压、电流峰值，直观反应三相电压、电流是否均衡。

3)    报警日志：系统自动记录供配电系统的报警信息（日志内容包括：发生报警的时间、报警的内容、报警级别、报警是否被确认等），并可对报警日志信息查询、输出。

4)    报警功能：对于供配电系统，发生报警均具有较高的报警级别。若发生报警，可以进行告警，并且通过短信通知以便及时处理。

5)    数据采集：配电柜及列头柜需提供电量仪及配套互感器。

2.UPS监测

UPS电源作为电力设备系统正常运行的基础，对UPS 电源进行监控十分必要。通过获取包括输入电参数、输出电参数、蓄电池参数等信息以及运行状态，实现对UPS 电源的实时监控，当运行参数发生异常时，将告警信息推送至上层应用。

UPS 监控全面监测 UPS 的运行状况以及各类参数（具体参数视UPS设备具体情况而定，且UPS设备提供TCP或者RS-485/232通讯协议）：

1)    状态监测：对 UPS 各部件（如：UPS 整流器、逆变器、电池、旁路、负载）

2)    的运行状态正常与否进行实时监测和显示；

3)    参数监测：对 UPS 各运行参数（(如：UPS 输入/输出电压、输出电流、输

4)    出/入频率)进行实时监测和显示；

5)    监测报警：系统一旦监测到有报警或参数越限（可设置），系统将自动进

6)    行声光色告警，也可以进行短信通知或者语音通知；

7)    图形显示：对重要参数（例如：UPS 输入/输出电压、输出电流）可作曲

8)    线记录，用户可通过曲线记录，直观地看到 UPS 的运行品质；

9)    事件查询与报表生成：对 UPS 产生的报警事件，可以进行查询及输出。

3.温湿度监测

对于机房内各种昂贵的电子设备，其正常运行对环境温湿度有较高的要求。因此需要通过相应的温湿度传感器进行场地温湿度数据采集，以便准确了解机房温湿情况。

1)    实时监测：通过温湿度传感器可以实时准确的监测机房内的温湿度；

2)    超正常值报警：可以设置机房温湿度正常上、下限值，当机房的温湿度超过预定值时，系统自动对外发送报警信息；

3)    操作：管理人员接到系统温湿度报警后可通过综合监控系统对机房内的空调进行调节，以完成对机房环境温湿度的控制；

4)    历史查询：通过历数据可以对当天和做了历史记录的任意一天的曲线进行查询；

4.精密空调监测

机房精密空调为机房提供恒温恒湿的环境条件，确保机房设备良好稳定运行，所以，对机房的精密空调进行监控刻不容缓。

精密空调系统监测的运行状况以及各类参数如下：

1)    状态监测：对空调的各部件（(如：压缩机、风机、加热器、加湿器、去

2)    湿器、滤网)运行状态正常与否进行实时监控和显示；

3)    参数监测：对空调运行时各参数（如：回风温湿度、送风温湿度、温湿度

4)    的高低报警值、压缩机运行时间）进行实时的监测和显示；

5)    监测报警：系统一旦监测到有报警或参数越限(如：风机故障、压缩机故

6)    障、过滤器堵塞、温度湿度越限)，系统将可以进行告警，并通过短信通知运维人员；

7)    历史曲线：对重要参数（例如：温湿度），可作曲线图形记录，用户可通过图形记录直观地看到空调机组的运行品质；

8)    事件查询与报表生成：对空调产生的报警事件，可以根据不同的条件进行；

9)    查询，对查询的结果可生成报表；

10)  数据采集：精密空调需提供数据采集端口和协议，如RJ45和tcp协议等。

5.门禁管理

在重要的机房和房间，采用指纹识别鉴别的方式，防止他人冒充顶替进出机房（房间）的事件。

控制管理终端设在监控中心，既可实时识别与显示出入人员的资料，又可对其出入时间和资料进行存储、统计、分析和回放。又可以增加考勤功能。

对不合法确认或对门禁破坏行动，可以设定在远端和（或）现场报警。

本项目的门禁系统为原有机房门禁系统的末端扩容，设置3个门禁控制点及其相应的设备。新增设备要求与原系统匹配，能无缝对接。

6.防盗报警

探测点应设在机房的关键位置和重要通道上，发生非法进入等符合报警条件时，探测器应能迅速反应，即时报警并显示报警地点，录入报警记录在案。

本项目的防盗报警系统为原有防盗报警系统的末端扩容，设置3个防盗报警点及其相应的设备。新增设备要求与原系统匹配，能无缝对接。

7.机房漏水检测

房内精密空调的冷凝水管都有可能出现漏水，或者由于空调的温度过低，导致空气凝聚成水滴，这些都将威胁着机房内各设备。设计通过在精密空调周围可能造成漏水的水源附近安装定位式漏水监测仪，一旦有水泄漏碰到漏水监测仪，漏水监测仪通过数据采集器将信号传输到动环系统后上报机房综合监控系统平台，准确的反映漏水的具体位置，及时通知有关人员排除，并产生相关报警信息。

1)    状态监测：实时监测漏水系统中漏水控制器的工作状态； 

2)    断线报警功能：对感应线有断线报警功能；

3)    报警日志：系统自动记录漏水系统的报警信息（日志内容包括：发生报警的时间、报警的内容、报警级别、报警是否被确认）；

4)    系统报警：当监测到有漏水现象时，可以进行告警，并且通过短信通知。

8. 视频安防监控系统

（1）系统体系结构

系统组网图

集中视频监控系统由以下四个基本部分组成：

1.    前端监控摄像部分

2.    前端数据处理与执行部分

3.    传输部分

4.    监控中心部分

系统各部分功能如下：

1.    前端监控摄像部分：通过我们安放在移动机房内部和周边的高速球机来拍摄事发现场的图像画面，把数据传给前端的图像处理部分，除了摄像功能外，还可以将烟雾传感器、红外传感器等设备接入到系统的报警联动模块中来。

2.    前端数据处理与执行部分：由摄像部分送来的视频信号并通过传输部分将所有的视频信号24小时不间断地传送到监控中心处理。

3.    传输部分：移动机房提供光纤专网或者2M E1专网，实现前端监控设备和监控中心的网络互联，保证了视频信号和控制指令信息的可靠和高质量传输。

4.    监控中心部分：提供WEB服务功能，授权用户可以通过IE远程访问系统，浏览机房监控视频信息。传输部分送来的视频信号将被中心监控终端发送到大屏幕背投电视墙上显示。同时，监控中心将通过专门的大型存储设备保存近一个月的所有机房视频监控点视频信号，以备日后查询。

（2）机房监控拓扑图

基站机房监控拓扑图

1.    室外摄像机：室外摄像机采用定点安装，为扩大视野，采用广角镜头。在机房外部四面墙体顶端安装摄像机可以实现全方位的监控。摄像机为日夜转换摄像机，配备红外灯，可以在夜间监控，实现24小时不间断监控。为保证摄像机不被损坏，摄像机和红外灯都配备了防护罩。

2.    室内摄像机：考虑到室内摄像机可以用于辅助对机房设备的遥控，实现“遥视”，室内摄像机安装在云台上，可以上下左右转动，焦距也可以调节。云台具备预置位功能，可以实现在报警触发时摄像机联动。为了实现24小时监控，室内也安装了红外灯；为了保护摄像机不被损坏，安装了防护罩。

3.    网络硬盘录像机：实现视频监控的重要设备，安装在机房，输入信号包括摄像机视频信号和传感器报警信号。当有告警信号时，实现告警联动，并将告警信号上报到监控中心。硬盘录像机本身也可以探测警情，包括视频丢失告警和移动侦测告警，前者在摄像机被破坏而无视频信号时告警，后者在指定的区域中发现物体活动（如有人闯入）时报警，同时上报监控中心。硬盘录像机还提供网络视频服务器功能，因此在监控中心可以访问机房监控视频并在监控中心保留视频录像。如果需要，硬盘录像机可以实现监控中心到机房的语音对讲或者语音广播。

4.    案例综合智能集中管理平台：具备消防、视频、安防、电气安全、动力环境集中监控及管理功能，需提供媒体交换服务器及视频诊断服务器。