数据中心机房末端配电技术与应用

数据中心机房末端配电技术与应用
朱鹍
安科瑞电气股份有限公司 上海嘉定 201801
 
摘 要：数据中心机房末端配电的可靠性、稳定性和可维护性直接关系到 IT 设备的安全供电。数据中心的末端配电技术主要有两种，一种采用列头柜加电缆配电，另一种是智能小母线配电。分别对两种配电技术进行了介绍和探讨，最后对两种配电方式进行了对比分析，得出一些有益的结论。
 
关键词：数据中心；末端配电；列头柜；智能小母线
 
1 概述
      数据中心是确定的“新基建”七大领域之一。数据中心在国民经济和社会发展中所起的作用越来越重要，数据中心已经成为了各行各业的关键基础设施，为经济转型升级提供了重要支撑。
      数据中心要实现持续稳定运行，前提是其供电系统应稳定可靠、不间断。当前，重要程度高的A级数据中心一般采用2N架构的UPS供电方式，以实现容错要求，供电系统包括高低压配电、后备发电机组、不间断电源、后备蓄电池、精密配电等子系统，典型的数据中心供电系统如图1所示。
      从图1可以看出，较终的用电设备实现了全程双路由容错供电。
 


 
2 末端配电
      数据中心机房的末端配电一般是指从不间断电源输出柜到较终用电设备的配电部分，较终用电设备包括IT设备、动力设备和照明等。数据中心的末端配电较接近用电设备，是整个供配电系统中的关键环节，它的安全可靠十分重要。
      传统的末端配电技术一般采用列头柜加电缆配电，典型的配电系统如图2所示。


 
 
3 列头柜配电技术探讨
      按照规范的要求，A级数据中心的基础设施宜按容错系统配置。当数据中心的末端配电采用列头柜加电缆配电时，存在多种方案。以数据中心应用较多的封闭冷通道为例，配电方案主要有如下4种方案。
3.1 方案一
      方案一如图3所示。
每个封闭冷通道设置两个列头柜，分别位于每列的头部，每个列头柜由不同的UPS系统引出，即列头柜A由2N双母线系统的UPS系统A引出，列头柜B由2N双母线系统的UPS系统B引出。
      IT机柜的供电方式为：每个IT机柜内包括两路PDU，PDU(A) 和PDU(B)，其中PDU（A）通过电缆由列头柜A取电，PDU(B)通过电缆由列头柜B取电。
      本供电方案的优点是实现了全程双回路供电，无单点故障点，供电架构清晰。缺点是 IT 机柜的供电需要跨列引电，布线有一定难度。


3.2 方案二
      方案二的机柜布置和方案一相同，如图3所示，但列头柜的内部配置和配电电缆的敷设不同。具体方案是：每个封闭冷通道也设置两个列头柜，列头柜A和列头柜B，但每个列头柜内部又分为A、B两路，每路由不同的UPS系统引出，即列头柜A和列头柜B内的A路由2N双母线系统的UPS系统A引出，列头柜A和列头柜B内的B路由2N双母线系统的UPS系统B引出。
      IT机柜的供电方式是IT机柜的两路PDU均来自于本列的列头柜，其中PDU（A）来自于本列列头柜中的A路，PDU（B）来自于本列列头柜中的B路；这种供电方式结构清晰，但当列头柜需要扩容、换或移位时，后端IT机柜的割接难度和工作量较大。
3.3 方案三
      方案三和方案二的不同之处仅在于IT机柜的取电方式不同，即IT机柜的两路PDU分别来自于不同的列头柜，且不同路，1列的IT机柜的PDU（A）来自于列头柜A内的A路，PDU（B）来自于列头柜B内的B路；2列的IT机柜的PDU（A）来自于列头柜B内的A路，PDU（B）来自于列头柜A内的B路；这种供电方式了IT机柜的供电为全程双路由，且不存在单点故障点，但布线比较复杂，现场接线*发生错误，可能导致IT机柜由假双路电源供电。
3.4 方案四
      方案四如图4所示。
      每个封闭冷通道只设置1个列头柜，位于其中一列的头部，列头柜内部分为A、B两路，分别由不同的UPS系统引出。IT机柜的两路PDU分别由列头柜内的A路和B路取电。
      这种方案的优点是只占用了一个机柜位置，节约了宝贵的机房空间资源。缺点是电缆需要跨列敷设，且当列头柜需要维修、扩容、换或移位时，将造成后端所有IT机柜断电。


3.5 列头柜配电方案对比
      对上述4种列头柜配电方案进行对比，如表1所示。
      综合列头柜的上述4种列头柜配电方案的优、缺点，建议采用配电方案一。


3.6 列头柜配电技术分析
      列头柜配电技术要占用宝贵的机房资源，每台列头柜要占用了一个机柜位置，使得可出租的IT机柜数量变少。
      列头柜配电采用电缆进行出线，出线配置1P或2P空开，每一个出线回路连接一根电缆到一台机柜，再通过工业连接器或者直接连接到PDU的端子排上，为服务器进行供电。列头柜在设计中往往会配置一些备用回路，以备日后机柜扩容或者维修，当列头柜方案落地实施后，再进行调整和改会非常麻烦，甚至需要停机进行作业。采用电缆出线，如果双路配电的方案，会有大量的电缆需要部署，后期维护、增加、减少机柜、调整机柜布局、增加机柜容量等难度很大。另外，电缆中间没有监控，长期通过大电流出现绝缘老化时无法提前预警，对运营带来潜在危险。
 
4 智能小母线配电技术探讨
      由于列头柜要占用宝贵的机房资源，且配电不够灵活，业界一直在研究加灵活可靠的末端配电技术，智能小母线配电技术应运而生。
      智能小母线是相对应用于低压配电系统的大母线而言的，应用于机房末端配电，且电流一般在800A以下的小型母线系统。
4.1 智能小母线的分类
      智能小母线按照结构可以分为滑轨式小母线和直列式小母线。
      所谓滑轨式小母线，是指铜排导体采用环绕式布置，中间形成一个连续的空间通道，底部连续开槽，支持在任意点位插接取电的母线形式。
      滑轨式小母线具有全程全点位接入分支回路的特点。插接箱在母线槽的下方安装，即插即用，母线槽断电即可实现插接箱的在线插拔；母线槽为模块化结构，支持分步实施、延续、扩展和重构，支持部件的按需分项采购和部署。
      所谓直列式小母线，是指铜排导体采用上下并列平行布置，母线左右两侧可间隔或密集布置插孔接入分支回路的母线形式。
      直列式母线结构简单，成本低。但其插接箱是固定的，不能根据需求灵活移动，插接箱在母线槽的左右水平方向安装，插接口的数量有限，整体扩容性差。另外，插接箱的体积大，占用空间大，不易换，维护困难。因此，直列式小母线适合后期方案不进行调整，大范围固定配置的部署。
      滑轨式小母线和直列式小母线的特点对比如表2所示。


      由于滑轨式小母线的插接箱在母线槽的下方向下安装，两条智能小母线间距可以控制在 150mm以内，占用IT机柜上方的水平空间较小， 一般可以在500mm以内。插接箱朝向机柜后侧，便于操作和观察。而直列式小母线占用IT机柜上方的水平空间较大，一般都600 mm 以上，不便于安装，且不便于后期的操作和观察。因此，智能小母线推荐采用滑轨式小母线，不建议采用直列式小母线。
4.2 智能小母线的配置方式探讨
      对于封闭冷通道，智能小母线有单列单母线和单列双母线两种配置方式。
      单列单母线配置图如图5所示。


      由于采用单列单母线方式，需要跨列桥架，布线难度很大，不建议采用此种配置方式，推荐采用单列双母线配置方式。
4.3 智能小母线插接箱配置方式探讨
      IT机柜通过插接箱从母线取电，即母线通过插接箱将电送至IT机柜内的PDU。插接箱有单路输出和三路输出两种，单路输出的插接箱一般为单相，有的具备调相功能。三路输出的插接箱输入一般为三相，输出自然分相，有利于三相平衡。


      因此，插接箱的配置方式可以分为一对一模式和一对三模式。一对一模式的配置图如图 6所示，一对三模式如图7所示。


      两种插接箱配置方式对比如表4所示。
      虽然插接箱一对一的配置方式清晰方便，发生故障时只影响一个机架，但成本较高。考虑到IT机柜有两路供电，两路供电同时发生故障的可能性很低，而且，一对三方式采用一般三相输入，输出到三个机柜自然分相，不需要额外考虑三相平衡问题，因此推荐采用一对三的配置方式。
 
5 末端配电技术对比分析
5.1 列头柜配电技术与智能小母线配电技术的优缺点
      传统的机房末端配电技术采用列头柜加电缆的配电方式，列头柜需要占用机柜安装位置；需要安装走线架，施工难度大，电缆较多，且一般需要一次性建成；IT机柜的配电容量是固定的，无法进行灵活调整；若机房搬迁，列头柜、电缆、走线架等一般无法重复利用。
      智能小母线配电技术采用了进线箱、母线槽和插接箱，为模块化结构，不需要占用宝贵的机柜安装位置；走线架，施工工期短；若IT机柜容量调整，插接箱可热插拔，只需换插接箱即可；若机房搬迁，设备均可重复利用。
      但智能小母线也存在如下缺点。
      （1）对机房高度要求高。采用列头柜配电方式，为满足走线要求，一般要求IT机柜上方有不小于500mm的高度，而智能小母线，要求上方不小于800mm的高度。
      （2）维护操作不方便。智能小母线的安装位置较高，操作人员如果要对开关进行分合闸等操作，比较不方便。
      （3）设置复杂。若插接箱内的空气开关故障，就要换插接箱，而且插接箱换后需要厂家重新设置通讯地址。两种配电方式的特点对比如表5所示。
      综上所述，如果是一次性部署服务器或是方案固定的数据中心，一般会采用列头柜加电缆的配电方案。如果是需要分批次部署服务器的数据中心，或后期需要进行末端负荷调整的数据中心，推荐采用全点位、滑轨式的智能小母线配电方案。
5.2 两种配电方式的造价对比
      我们仍以常见的封闭冷通道来进行对比，该封闭冷通道采用2N双母线UPS供电方式。一般来说，封闭冷通道内的单列IT机柜数量在25个以内，现假设为单列18个机柜，若采用列头柜配电方式，则单列IT机柜数为17个，单个IT 机柜额定功率为4 kW。采用智能小母线方案，则单列机柜数为18个机柜。
      列头柜配电方案如图3所示，智能小母线配电方案如图7所示。
      列头柜配电方案的造价如表6所示。智能小母线配电方案的造价如表7所示。
      从表6和表7可以看出，两种配电方式的造价相差105840元，但智能小母线配电方式可以多安装2个IT机柜，假设每机柜的月租金（不含电费）为2500元，则多花的投资部分，其回收期约为1.76年。在10年的运营期内，小母线配电方式可以为增加租金收入约49.4 万。
 
6安科瑞为数据中心提供的能效监控解决方案
6.1 精密配电管理解决方案
      AMC系列数据中心精密配电系统是针对数据机房末端设计的，能够综合采集所有能源数据的智能系统，为交直流电源配电柜提供精确的电参量信息，并可通过通讯将数据上传到动环监控系统，实现对整个数据机房的实时监控和有效管理，为实现*绿色IDC提供可靠。
6.1.1交流系统
      1）功能要求：
      遥测：输入分路的三相电压、三相电流、有功功率、有功电度；输出分路的单相电压、单相电流、有功功率、有功电度；
      遥信：输入分路的过压/欠压，缺相,过流，输入分路和输出分路的开关状态,具备电流、功率需用量分析和统计，实现电压、电流、功率等参数的越限报警功能。
      2）配置方案-示意图
 


 
配置方案 
多功能仪表       PZ72L-E4
电流互感器       AKH-0.66-30I-XXA/5A
6.1.2直流系统
      1) 功能要求
      遥测：输入分路的电压、电流、功率、电度；
      遥信：输入分路的过压/欠压，输入分路的熔丝状态,具备电流、功率需用量分析和统计，实现电压、电流、功率等参数的越限功能。
      2)配置方案-示意图
 


配置方案
多功能仪表          PZ72L-DE
 霍尔传感器          AHKC-F-  XXA/5V
 开关电源            SBD-30  （48V）
 
 
 
产品规格
 






 
说明：■为标配功能。
 
配套附件




6.2 AMB智能小母线管理系统
      数据中心小母线系统是数据中心末端母线供配电系统的俗称。近年来，随着数据中心建设的快速发展和高需求，智能小母线系统逐渐被应用于机房的末端配电中，具有电流小、插接方便、智能化程度高等特点，即插式插接箱给各个机柜内的PDU分配电。始端箱和插接箱内可设置监测模块，将数据上传至动环监控中心。
      1）交流系统功能：
      遥测：三相电压、电流、有功功率、无功功率、视在功率、功率因数、有功电能、无功电能、电缆温度，系统频率、零序电流、零地电压、漏电流、机柜温度、机柜湿度、开关状态、电压/电流谐波含量、电流/功率；
      遥信：过电流2段阀值越限、过/欠压、过功率告警、缺相、过频率、欠频率越限、零地电压、零线电流、温/湿度告警，开关状态、开关跳闸；    
      2）直流系统功能：
      遥测：电压、电流、功率、电能、电缆温度、漏电流、机柜温度、机柜湿度、开关状态、电流/功率；
      遥信：过电流2段阀值越限、过/欠压、过功率告警、缺相、温/湿度告警，开关状态、开关跳闸；                             
产品介绍


       
说明：■为标配功能。
 
7总结
      末端配电是数据中心供配电系统的末梢环节，它的可靠性、稳定性和可维护性直接关系到IT设备的安全供电。数据中心的末端配电方式主要包括两种，一种是采用列头柜加电缆的配电方式，另一种是智能小母线配电方式。本文通过分析，得出如下结论：
      （1）对于封闭冷通道，如果采用列头柜加电缆的配电方式，建议采用上文中的方案一，即每个冷通道配置2个列头柜，每个IT机柜分别从2个列头柜各取1路电源。
      （2）智能小母线分为滑轨式小母线和直列式小母线，考虑到机房的实际应用环境，推荐采用滑轨式小母线，不建议采用直列式小母线。
      （3）智能小母线推荐采用单列双母线方案。
      （4）智能小母线的插接箱推荐采用一拖三方案。
      （5）对于分批次部署服务器的数据中心，或后期需要进行末端负荷调整的数据中心，强烈建议采用滑轨式的智能小母线配电方案；如果是一次性部署服务器或是方案固定的数据中心，可采用列头柜加电缆的配电方案。
      （6）智能小母线造价相对较高，投资回收期约为2年。
      总的来说，由于智能小母线具有不占用机柜位置、配电回路清晰、模块化结构、工期短、可重复利用等优点，虽然其造价相对较高，但在整个运营期内可以为投资方带来大的收益。因此，建议在数据中心内推广应用智能小母线末端配电技术。
 
 
参考文献： 
【1】谢拥华.数据中心机房末端配电技术与应用探讨
【2】袁云涛.数据中心机房机柜母线的布置方式探讨.2021年2月
【3】姚燕家.IDC产业变革数据中心末端配电领域面临的挑战与机遇.2020年11月
【4】安科瑞数据中心IDC配电监控解决方案.2020.03版
 
 
作者简介：
朱鹍，女，现任职于安科瑞电气股份有限公司，主要从事企业能源管控研究发展。

http://acrelzk001.cn.b2b168.com