模块化数据中心通信电源供电技术的研究
2019-08-19曹连兵王新芳
曹连兵, 周 莲, 王新芳
(1. 中国移动通信集团设计院有限公司,北京 100038;2. 中国建筑科学研究院有限公司,北京 100013)
0 引言
随着4G通信技术、云计算和物联网等各种技术不断发展,数据中心建设迎来了一个新的建设高潮。面对高速发展的数据中心,常规机房是“固态的”,不能灵活配置,远期扩展困难,随着IDC业务的发展和应用的增加,常规机房的弊端逐渐显现。常规机房基本上是按照项目进行部署的,机架密度低,部署建设缓慢,例如空调、电源、电气等辅助模块与服务器绑定严格,未来扩展困难,改造一处有可能涉及整个机房。到后期,随着业务的发展、应用的增加,机房系统需求的软件管理很多,使得冗余系统增加,原有的电源、空调等辅助模块已很难满足系统要求,此时需要对系统进行整体重新设计,并且进行扩展。
基于此,模块化数据中心应运而生。不仅可解决客户不断增长、变化的业务需求与常规机房部署缓慢、投资高、回报低之间的矛盾,还可进一步提高数据中心的使用率和工作效率,控制投资成本。
1 模块化数据中心的设计方案
1.1 模块化数据中心的组成
采用模块化布置的数据中心是把常规机房的制冷、电源、智能化、机架、布线等各系统集成化整合在一个装置内,把数据中心的所有机房按照行业内的规范划分成若干模块,即整个数据中心的机房分成若干独立区域,每个区域放置一个微模块,其规模配置、负载功率、配电、制冷、监控、网络等功能均按照统一标准和接口、模块化的独立运行区域进行设计,实现区域的微模块化、独立化,配电、冷源及系统管理软件等均可独立运行,无共享部分,实现了数据中心的快速灵活部署以及远期的扩建,同时初期的建设和设备成本大幅降低,缩短建设和部署周期,进而使数据中心内的机房可以灵活、机动部署。
模块化数据中心对建筑的要求不是很高,通常确认了物理建筑后,可以一次性把供电系统、发电机系统、制冷系统等配套设施建设好,仅预留远期的出水、电、网络等标准接口,后期具体按需部署机房模块即可。这种建设模式使模块的部署和整个建设过程可以分步实施,降低了互相影响的概率,能真正实现按需部署和扩展。据某公司研究显示,模块化数据中心建设周期要比常规机房缩短一半以上。
因此,微模块数据中心利用先进的制冷技术、供电技术以及其他相关先进技术,既提高数据中心内部的IT设备效率,也加强了冷源的使用效率,提高能源的利用率,降低了机房的PUE值,极大地推动了数据中心的绿色化。常规机房组成及模块化数据中心总体布局详见图1~2。
图1 常规机房组成示意图
图2 模块化数据中心总体布局图
1.2 微模块密闭冷、热通道方案的选型
模块化数据中心密闭通道适用于新建数据中心和旧机房的改造,可采用“密闭冷通道”方案,也能根据需求组成“密闭热通道”方案。
当机房有精密空调时,单机柜功率不超过6kW且采用地板下送风时,能够采用密闭冷通道方案,通过机房的精密空调来实现对密闭通道内设备的散热要求,密闭冷通道可使冷源直接进入到IT设备,提高制冷效率。双排密闭冷通道微模块与密闭冷通道微模块送风示意图详见图3~4。
图3 双排密闭冷通道微模块
图4 密闭冷通道微模块送风示意图
当单机柜功率大于6kW时,由于单机柜功率大,传统机房布置受限,不能满足散热要求,存在局部热点,密闭冷通道的方案不能满足散热的需求,此时可采用密闭热通道方案微模块,只需将模块化数据中心中各个设备旋转180°,设备由“面对面”放置改为“背对背”放置,端门和天窗的接口在机柜上预留,即可实现密闭热通道方案。密闭热通道是将IT设备散发的热量直接送入到空调的回风口,空调的制冷效率高,使模块外的机房保持比较舒适的温度。双排密闭热通道的微模块示意图如图5所示。
图5 双排密闭热通道的微模块示意图
2 模块化数据中心供电特点
模块化数据中心具有快速部署、安全可靠、配置灵活、易于扩展、智能化管理、绿色节能等特点。
2.1 快速部署,缩短建设周期
(1)模块化数据中心在规划、设计时严格遵循国际标准,按照既定的建设目标,采用合适的方式进行系统结构设计。选用满足当前需求的设备数量与类型,设计模块化和物理排列,集成度高,易于安装。
(2)数据中心的微模块可以批量生产,提高了交货速度。在出厂前完成机柜的预安装,为减少现场施工的工作量,采用标准化的配置和连接方式,进一步提高安装速度。
(3)模块化数据中心现场只需接通机柜外部电源、固定机柜等简单操作后即可进行系统调试。此外,微模块可以采用与现场一模一样的方式在工厂进行连接并预先测试,提高系统的调试速度。
(4)根据当前的机房需求进行设计,只需部署比典型传统系统设备数量更少的小型基础设施,进一步缩短了各个部署阶段所需的时间。
(5)微模块化的数据中心建设周期可大大缩短,常规机房实施阶段需要7~8个月,而采用微模块建设周期可缩短至3~6个月。
2.2 安全性和可靠性
(1)模块化数据中心遵循Tier Ⅲ标准,采用模块化、标准化和高整合设计,使得整个系统稳定度高,设备安全可靠。
(2)采用模块化设计的机房充分考虑了自然灾害的影响,进一步提高了抵御能力,充分保证了电源、冷源的可靠性,同时也保证通讯系统的正常工作。
(3)模块化数据机房动环监控系统配置齐全,能够随时掌握机房情况,提升机房的防盗能力。
2.3 灵活扩展、分期建设
(1)配置模块化机房,可分期灵活配置,满足快速扩容的需求。
(2)机房的模块化设计在配电、通信网络上预留适当的备用余量,可实现灵活扩容。
(3)采用微模块架构数据中心,可根据需求使微模块从1个到几十个逐步增加,进行分期建设。
2.4 绿色节能
(1)依据现阶段预测的机架需求设计数据中心的基础设施建设,同时考虑未来需求的变化,未来即可安装新的微模块,因而可节约非常可观的电力成本。
(2)新建的数据中心采用模块化方式进行设计,进一步优化了电源、冷源容量与机架负荷需求的匹配程度,提高了工作效率并减少过度配置。微模块电源转换率高达95.4%,同时微模块内均采用统一的预留接口和统一的微模块系统,极大节省电能,达到系统节能。
(3)微模块采用机柜式(列间)空调,空调提供的冷源空气直接送至机架负载处,更靠近热源,这样气流通路较短,而且制冷更为精准,解决了局部热点的问题。另外,微模块内冷源部分的通道进行封闭,冷源和热源被隔离控制在冷通道或热通道内,避免气流互相影响,提高空调系统的利用效率。相比常规机房,微模块数据中心制冷效率提升12%以上。
(4)模块化数据中心提高数据中心的能效,与常规机房相比,能量的损耗可减少约30%。
2.5 智能管理、高效运营
(1)数据中心动环系统智能化:可以采用多层次、多系统、实时调节的方式,使数据中心的管理更智能化、自动化、精细化,同时采用动画系统的设备数据动态存储功能来准确定位能源损耗的高点,进一步帮助用户节约能源,降低损耗。
(2)充分利用动环系统的软件平台和资源。通过采集到各设备的动态数据进行实时分析,采用智能精细化节能措施,提高数据中心能源利用效率,降低PUE值,建成绿色节能数据中心。
(3)通过对数据中心全部资源的整个生命周期进行控制管理,达到数据中心能源信息的动态、闭环、精准管理,实现数据中心全部设备最优利用,降低设备损耗,提高能源使用率。
(4)按照用户需求和数据中心的现状制定切实可行的维护程序,及时刷新数据中心数据,实时控制。同时,按照事先制定的维护程序主动提示预警,并且可实时动态调节维护程序,根据数据中心的实际情况,保证实时执行最优维护策略,使数据中心的管理达到最优化。
3 微模块化数据机房的供配电系统方案
为了保证数据机房的高可用性,机柜通常由2路电源供电,基于数据中心规模,微模块的供电方式可分电源不入模块、电源入模块、分布式电源三大类。
3.1 电源不入模块供电形态
此形态,UPS/HVDC、备用电池集中安置在电力电池室内,通过UPS/HVDC输出柜向微模块供电,微模块内的供电系统(以双电源为例)示意如图6~7所示。
图6 微模块双电源供电架构(大型DC、冷冻水空调架构)
图6所示架构特点如下。
(1)采用冷冻水架构的数据中心适用。
(2)电源外置,集中部署。
(3)两路电源为微模块供电,微模块内设置A、B两个列头柜为IT机柜、空调末端(图中LCU)、微模块控制器(图中ECC800)提供双路电源。
(4)为简化微模块供电架构,IT机柜、空调末端供电归一化设计。
(5)两路输入电源(图中INPUT A、INPUT B)可以是UPS、HVDC、市电电源的任一种,但A、B两路电源不能同时由市电直接供电。
(6)如A、B两路电源中有一个是HVDC供电时,IT设备、空调末端、微模块控制器应可接受HVDC供电。
(7)A、B两路电源完全独立,微模块供电等级可达T4。
(8)实际部署中,也可采用1路电源供电,此时微模块供电等级为T2。
图7所示架构特点如下。
(1)采用风冷空调的数据中心适用。
(2)电源外置,集中部署。
(3)两路UPS或HVDC为微模块供电,微模块内设置A、B两个列头柜为微模块内的IT机柜提供双路电源。
(4)两路市电为微模块内的空调供电。
(5)UPS/HVDC、备用电池外置。
(6)微模块供电等级通常为T3。
(7)实际部署中,可采用1路UPS/HVDC电源供电,此时微模块等级为T2。
3.2 分布式电源形态(电源入模块供电)
分布式电源形态,互联网公司对数据中心的部署电源入模块形态,可分为UPS、HVDC入模块两类。
UPS入模块的典型架构如图8~9所示。
图8 UPS入模块的供电架构
图9 HVDC入模块的供电架构
图8所示架构特点如下。
(1)中小数据中心、风冷空调场景适用。
(2)电源与微模块一道建设,无需独立电源间,规划简单、按需建设。
(3)两路市电(图中AC输入1、AC输入2)经ATS转换后为微模块供电,正常工作时仅一路市电带负荷。
(4)微模块内设置一体化UPS柜为自身提供电源保护,备用电池通常也内置在微模块内。
(5)一体化UPS柜由ATS、市电配电、模块化UPS、UPS输出配电组合而成,微模块供电等级通常为T3。
(6)如需提升微模块供电等级至T4,应采用2套一体化UPS柜。
HVDC入模块的典型架构如图9所示。
图9所示架构特点如下。
(1)大型数据中心、冷冻水空调场景适用,腾讯微模块供电架构。
(2)电源与微模块一同建设,无需独立电源间,规划简单、按需建设。
(3)两路市电(图中A路AC、B路AC),A路直接为机柜、空调提供1路供电,主路A、主路B经ATS转换后再经HVDC为机柜、空调提供另一路供电。
(4)机柜、空调的两路电源通常均分负荷工作。
(5)微模块供电等级通常为T3。
(6)腾讯微模块内置2组铅酸电池。
3.3 分布式电源形态(电源入机柜)
分布式电源形态,Facebook首创,将48V高频开关电源引入数据中心,取消集中电源保护,多个机柜共享1个电池柜(如Facebook)或每个机柜内置1套电源。
架构特点包括:(1)定制电源,巨型互联网公司独享方案。(2)定制服务器,市电主用、48V电池备用。(3)48V电源仅为后备电池充电。(4)电池后备时间通常在10min内,遇停电需将业务迁移、关闭服务器。