数据中心冷却系统研究及应用进展

摘要：为加速实现数据中心节能降耗的目标,在合理、高效、最大化地利用室外自然冷源的同时,更不能忽视机械制冷系统本身能效的提升。加强自然冷却与机械制冷的协同,降低数据中心PUE,充分发挥安全稳定、高效运行的数据中心冷却系统自身能效至关重要。本文通过对气流组织、供/回水温度和冷却系统部件及形式3个方面的研究梳理,总结分析数据中心冷却系统节能提效有关技术研究与应用进展,从而为绿色、高效数据中心冷却系统的研发提供参考和借鉴。

数据中心作为承载各类数字化转型技术的重要基础设施,其机架建设数量和规模屡创新高。高速发展的数据中心产生了高能耗和高碳排放问题,2021年我国数据中心的年用电量已达到2166亿kW·h,占全国总用电量的2.6%。对此,国家相关部门对数据中心能耗提出了更严格的要求,截至2023年,全国大型、超大型数据中心电能利用效率(PUE)需降至1.3以下。而目前我国数据中心PUE平均在1.4以上,且有不少地区超过1.8。因此,数据中心节能减排刻不容缓。

数据中心能耗的40%由冷却系统产生,提升冷却系统能效是加快数据中心节能减排的重点环节。目前数据中心冷却系统运行方式仍以机械制冷为主,系统全年能耗居高不下。合理利用室外自然冷源可以有效延长自然冷却时间,降低冷水机组工作负荷,提升系统整体能效,但在夏季高温环境中,仍需要机械制冷提供必要的冷量。为进一步提升机械制冷本身能效和自然冷源利用率,增强自然冷却与机械制冷的协同能力,降低数据中心PUE,国内外学者对数据中心机械制冷本身及其耦合系统开展了一系列研究工作,例如:送风结构、通道封闭及气流组织管理;提高冷冻水供回水温度和温差;采用磁悬浮离心式冷水机组和部分部件变频控制;热管冷却、冷却塔冷却、间接蒸发冷却、蒸发冷凝等技术。笔者通过对上述数据中心冷却系统相关文献的梳理,从气流组织、冷冻水供回水温度、冷却系统部件及形式3方面,总结分析数据中心冷却系统的技术研究与应用进展情况,为冷却系统在新建和既有数据中心的节能应用提供参考和指导。

1 气流组织

随着数据中心高密度化发展,合理地对机房内气流组织进行优化,可以有效消除局部热点,改善数据中心热环境,进而提升冷却系统运行效率。当前数据中心采用的送风形式主要有架空地板送风和顶部送风,如图1所示。架空地板送风形式由于具有送风空气均匀、噪声较小和节能环保等特点得到了较多关注。

1.1 送风形式

早在2005年,S.Shrivastava等对“上送下回式”和“下送上回式”2种气流组织进行了研究和对比,发现“下送上回式”气流分布效果更好。刘鹏等通过CFD技术对上述2种气流组织模拟分析,发现后者温度场和速度场优于前者,进一步验证了下送风形式的优势。为进一步优化气流组织,JinC.Q.等总结分析了从机房级别到服务器级别影响架空地板送风的因素,表明气流均匀性和热性能主要受地板下通风结构的影响。

地板下通风结构主要受架空地板高度、穿孔地板穿孔率和静压层几何结构的影响。对于不同配置的数据中心,架空地板高度不是统一的,需要结合冷/热通道封闭情况寻求最佳高度。ZhangM.等对在封闭不同通道情况下的架空地板高度进行研究,发现在封闭冷通道时架空地板高度应为600~800mm,而在封闭热通道时架空地板高度应为400~600mm。此外,空气出口流量大小主要取决于穿孔地板穿孔率,穿孔率的大小对于机房内部热性能至关重要。研究表明,当穿孔率为20%~30%时,气流均匀性和热性能达到最佳。对于静压层几何结构,黄渤[27]提出了一种带有局部挡板的地板下送风结构,并对其进行仿真模拟分析,发现可以有效改善数据中心热性能。耿云使用Airpak模拟了不同挡板角度对机房热环境的影响,结果显示:在高架地板下方搭建15°角挡板,静压层高度为700mm,地板穿孔率为20%时,冷却效果最好。马昕宇设计了一个梯形静压箱,使用该箱地板下送风可以有效改善压力分布不均匀对气流组织的影响,并通过CFD模拟得到了静压箱最佳结构参数。

由此可见,架空地板送风是目前数据中心所采用的主要送风形式,其性能的优劣主要由地板下通风结构所决定,封闭不同通道时的架空地板最佳高度是不同的;当穿孔地板穿孔率为20%~30%时,气流均匀性和热性能最优。但该方面多集中于单个因素的研究与改进,对于多参数组合的研究和优化有待加强,应综合探究其影响。

1.2 冷/热通道封闭

在冷/热通道方面,当采用地板下送风形式时,机柜通常以“面对面、背靠背”的形式排列,容易造成冷/热气流掺混,为防止冷气流旁路和热气流再循环,研究人员提出了封闭冷/热通道的措施。

在封闭冷通道方面,秦冰月等和R.Schmidt等基于实际数据中心研究了冷通道封闭前后的能耗,结果显示:冷通道封闭后,制冷能耗节约超过59%。还有一些学者研究了冷通道封闭前后进出风的温度变化,采用封闭冷通道后,送风温度可提高3℃,机柜的进出风温度平均下降2~3℃,冷量利用更加充分。在封闭热通道方面,陈文辉采用DeST模拟了热通道封闭前后数据中心冷却系统的全年能耗,对比发现,封闭热通道后,冷却系统能耗下降约9.6%。虽然上述研究证明了封闭冷通道或热通道的优势,但并未在结构上对其进行改进。在通道结构上,S.A.Nada等研究了侧面封闭的半封闭冷通道和从侧面和顶部封闭的全封闭冷通道,发现二者均能够改善数据中心热性能。WangI.N.等提出了一种新型抽屉式机架,可以有效增大热通道空间并减小冷通道空间;与传统抽屉式机架相比,新型抽屉式机架的最高入口温度可降低13.3℃。此外,可以在冷通道或热通道中添加挡板,防止冷热气流混合。YuanX.L.等提出在机架的进气口中设置柔性挡板,进而改善气流分布。刘义军等对采用“V形”和“Λ形”挡板时的冷通道封闭系统进行仿真模拟,研究显示二者最佳静压高度分别为0.5m和0.6m,最佳穿孔率均为20%,但前者温度分布更均匀。

由此可见,封闭冷通道或热通道均能够改善气流组织和热性能,但相对于封闭热通道,封闭冷通道节能效果更好;在冷/热通道中增加挡板或改变通道其他结构,对改善机房热环境也有着显著作用。

2 供/回水温度

数据中心冷却系统的工作原理是通过送回风温差或供回水温差等驱动空气、水、制冷剂等传热介质循环,将机房内产生的热量排出到室外环境中。在此过程中,各个传热介质的温度和温差选取,不仅直接关系到相关制冷设备的选型和运行,更会影响到数据中心冷却系统的整体能耗。对于常用的数据中心冷水系统,其冷冻水供/回水温度对提升系统整体能效有着至关重要的作用。根据GB50174—2017《数据中心设计规范》,机房冷冻水供/回水温度为7~21℃/12~27℃,这对采用较高供/回水温度实现数据中心的节能具有很好的指导作用。合理提高冷冻水供/回水温度和采用大温差技术可以显著提升冷水机组工作效率,降低数据中心PUE。

2.1 提高冷冻水供/回水温度

数据中心通常采用冷水机组作为机房冷源,其水系统对于数据中心的稳定运行极为重要,尤其是冷冻水供/回水温度。适当提高冷冻水供/回水温度可以提升冷水机组中蒸发器的蒸发温度和蒸发压力,降低压缩机的压缩比,提升冷水机组能效。

冷冻水供水温度每提高1℃,冷水机组能效可提高2%~3%。陆琼文总结分析了某品牌冷水机组在不同冷冻水供水温度下机组的COP,与冷冻水供水温度为7℃时相比,供水温度为15℃时,冷水机组COP提高26.3%;每提高1℃冷冻水供水温度,冷水机组COP约提高3.3%。毛路等结合中国人寿数据中心实际工程应用方案,分析了冷冻水供水温度对冷水机组效率的影响(如图2所示),并据此选择了适合该工程的冷冻水供/回水温度。熊成利用TRNSYS软件分析不同负荷条件下空调系统最优供水温度及最高节能效率。罗露等运用MATLAB软件分析了变供水温度对制冷系统能耗、流量及冷冻水供/回水温度的影响,发现变流量方式较原基础方式可节能7%。

2.2 大温差技术

大温差技术主要是通过提升数据中心冷却系统中冷冻水供回水温差减小流量,进而降低水泵和冷水机组能耗,提升系统节能效果。降低供水温度的同时提升回水温度是国内外增大水系统温差所采用的主流方式,但降低供水温度会增大冷水机组制冷负担,因此采用合理的水系统温差格外重要。

蒋吉敏分析了影响冷冻水大温差主体性能的主要因素,且提供了部分优化设计方案。张淇淇通过对大温差冷却系统应用于数据中心项目的节能性分析,基于假定的系统模型研究计算了不同冷冻水供回水温差条件下系统的冷水机组能耗,如表1所示,温差每提高1℃,单位制冷量能耗下降约0.2%。康致博基于对数据中心冷却系统大温差供冷工况下换热器的优化设计,计算得到优化后的冷冻水供/回水温度为15℃/20℃,与常规7℃/12℃相比,每年可节省106.52万元电费。赵磊等通过实际项目对大温差技术进行了分析,当冷水温度由7℃/12℃提高到18℃/28℃时,离心式冷水机组的COP可提高25%。

综上所述,针对数据中心冷却系统的供/回水温度,一方面要提高冷冻水供/回水温度,提升冷水机组制冷效率;另一方面要采用大温差技术,增大系统冷源侧换热温差,降低系统中水泵能耗。但同时应考虑二者附带的不利影响,例如,冷冻水供/回水温度提高会提升空调末端进出风温度,导致风机功耗增大;影响电子元器件耐受性和寿命等。数据中心冷却系统采用提高冷冻水供/回水温度和大温差技术应结合实际需求统筹考虑,尤其是既有数据中心的节能改造。

3 冷却系统部件及形式

数据中心冷却系统作为一个复杂的整体,其中任何一个部件的变化都会影响到系统的整体性能。通过对系统中部分组件进行合理的选型和管理,不仅可以提高相关部件的运行效率,还能进一步提升系统能效。此外,合理、有效、最大化利用室外自然冷源,充分发挥冷水机组的灵活性和可控性,也是降低冷水机组工作负荷和实现数据中心节能降耗的重要举措。

3.1 系统局部提效

在数据中心冷却系统运行时,压缩机的能耗居于首位,直接影响冷水机组的制冷效率和系统能效。因此,可通过压缩机设备的选型更换、变频控制等实现局部提效。传统蒸气压缩系统中需要使用一定量的润滑油减轻部件的磨损、散热、密封等,但润滑油的存在会降低传热性能,增大冷水机组工作负荷。针对这一情况,研究人员开发了磁悬浮离心式压缩机。张娴等对海南某数据中心空调系统进行了研究,当冷水机组全部运行,负载率为70%~80%时,磁悬浮离心式冷水机组的COP在15以上。LyuW.H.等模拟分析磁悬浮离心式冷水机组对数据中心冷却系统的节能性和经济性的影响,并结合南京某高校小型数据中心长期监测数据,发现磁悬浮离心式冷水机组在不同负荷条件下的平均COP在8~10变化,高于传统离心式冷水机组和涡旋式冷水机组,可节能10%~40%。孙洁等针对夏热冬冷地区研发了数据中心专用小压比磁悬浮变频离心式冷水机组,经测试,该机组全年综合能效比在5以上;此外,还建立了小压比磁悬浮变频离心式冷水机组的性能系数半经验模型,根据其特性提出了具体的运行控制策略。娄小军等利用参数分析法计算得到了不同城市数据中心在不同工况下采用变频冷水机组的节能效果,结果显示:变频冷水机组相较于定频冷水机组可以对数据中心实现显著的节能减排效果。

冷冻水泵、冷却水泵的变频调节、管道优化和水阀控制也是系统局部提效的重要方法。黄国瑞等以上海某金融类数据中心为研究对象,利用TRNSYS仿真平台搭建其冷却系统能耗模型,分析水泵变频改造后数据中心的节能减排效果,结果显示:在负载率10%~20%下,水泵变频改造后,水泵能耗降低150~168kW。YuF.W.等提出了一种基于建筑变负荷的冷冻水泵变频控制策略,试验结果表明,与传统的定频运行策略相比,变频控制策略能够使系统能耗降低19.7%。管道布置和其他的一些结构改进也会影响系统的节能效果。为消除完全自然冷却工况下需要克服额外冷水机组蒸发器阻力的缺点,研究人员针对冷冻水侧和冷却水侧分别提出了新的连接方式,如图3所示。但这样做额外增加了管道和阀门,同时增大了阻力损失和泄漏风险。在水阀方面,唐瑞等设计了一个新型混水温控阀,相比T形三通阀混水出现温度分层现象,该温控阀混水温度分布均匀,有助于降低冷水机组能耗。

综上所述,数据中心冷却系统中各个部件的优化能够提升系统整体能效。如采用磁悬浮冷水机组,较传统冷水机组可节能10%~40%;对系统中水泵采用变频控制,与定频运行相比,系统能耗可降低20%左右;此外,通过对系统中管道的优化和阀门的改进,也能实现系统的节能降耗。但冷却系统中各部件或多或少都会对系统性能有所影响,节能优化涉及的因素更为复杂多样,且各因素相互影响,局部提效在实际应用中往往不能达到预期效果,如何确保优化后的部件与系统中其他各部件高效协同运行是一大难点,也是下一步需要重点关注和解决的问题。

3.2 机械制冷耦合自然冷却

除了对数据中心冷却系统局部上的一些优化改进,在系统形式方面也有着一定的研究进展。自然冷却技术是数据中心节能降耗的一项关键技术,可以有效降低冷水机组全年工作负荷。自然冷却技术主要通过空气换热器、水换热器和热管换热器等方式利用室外自然冷源对数据中心冷却,但当室外温度较高时,仍需要开启机械制冷系统,由冷水机组补充必要的冷量。对于自然冷却与机械制冷耦合的复合系统,目前数据中心常用的主要是冷却塔自然冷却和蒸发冷却。

3.2.1冷却塔供冷

冷却塔供冷可以有效缩短冷水机组的启动时间,降低能耗,提高自然冷源利用率。根据应用形式的不同,可分为冷却塔直接供冷系统和冷却塔加板式换热器的间接供冷系统,如图4所示。

目前,冷却塔供冷广泛应用在数据中心,且已经取得了显著成效。李佐洋等以重庆某数据中心为研究对象,使用冷却塔供冷技术对该数据中心进行自然冷却,每天可节能7990kW·h,节能率为8.05%。冯潇潇基于冷却塔间接冷却系统的研究,在冷却塔进风侧添加了一个空气-水表面式换热器,设计了间接蒸发冷却塔系统;采用该系统后,自然冷却的全年可利用时间得到进一步延长,且该系统结构在冬季能起到防冻的作用;但该系统需要配置额外的设备和管路,一方面增加了投资,另一方面加大了系统运行控制的复杂性。

3.2.2蒸发冷却

蒸发冷却技术是一种利用水蒸发吸热制冷的绿色节能技术。蒸发冷却式冷水机组是主要工作设备,其实质是产出介质为冷水的蒸发冷却-机械制冷联合冷水机组。HuangX.等提出了一种间接蒸发冷却器预冷进气,将其应用到我国新疆维吾尔自治区的数据中心,实现数据中心空调系统的自然冷却。陈璐等针对间接蒸发冷却机组占地面积大和数据中心出架率较低的问题,提出了一种空调系统新型架构模式,即冷冻水系统与间接蒸发冷却机组顶层应用相结合,为数据中心实际应用提供参考。郭志成等以新疆地区冬季室外冷空气为工作条件,研发一种复合乙二醇自然冷却技术的蒸发冷却式冷水机组,并设计了单面进风蒸发冷却式冷水机组和双面进风蒸发冷却式冷水机组2种方案,如图5所示,经测试节能效果显著。

近年来,为增强蒸发冷凝技术的预冷效果,减少冷水机组的能耗,蒸发冷凝技术在数据中心得到了推广和应用。苏晓青等研究了蒸发式冷凝冷水机组在数据中心的适用性,将该机组与水冷式冷水机组进行比较,结果显示蒸发式冷凝冷水机组节能约29.5%。区志江利用VB软件对适用于机房空调领域的蒸发式冷凝冷水机组进行优化设计,相比水冷式冷水机组,优化后的蒸发式冷凝冷水机组性能提高14.0%,节能12.8%。吴东青等针对新疆地区冬季气温较低的特点,为防止冷水在冬季结冰,对蒸发冷凝空调系统中的冷水系统添加45%乙二醇(凝固点温度为-32℃)溶液,采用该技术后,数据中心PUE为1.362。WuX.Y.等为提高数据中心冷却系统在炎热干燥夏季的能效,避免寒冷冬季结冰,提出了配置板管式蒸发冷凝器的冷水机组,并在干燥寒冷西北地区数据中心使用了一年,数据中心年均PUE可达1.32。刘振宇等为加大自然冷源的使用时间,将蒸发冷却、蒸发冷凝、机械制冷技术结合,提出一种新型数据中心用蒸发冷却(凝)空调机组,对比分析了新疆某数据中心年耗电量,采用蒸发冷却(凝)空调机组年节电率可达51.4%。

综上所述,冷却塔供冷和蒸发冷却,尤其是冷却塔间接供冷和间接蒸发冷却,二者均在数据中心实际应用中取得了显著成效,能够充分利用室外自然冷源,降低冷水机组工作负荷。二者冷却系统各有千秋,在实际设计数据机房空调系统时,应根据当地的气候条件、机房的实际情况等,充分利用室外自然资源,选择合适的供冷系统,从而达到数据中心节能降耗的目的。此外,目前的研究大多数只考虑某一种自然冷却技术与机械制冷耦合。但实际上,对于某些气候条件下的数据中心,如果能够实现多种自然冷却技术与机械制冷的联合应用,节能效果将更加显著。

4 结论

为应对高密度、集中化、模块化的数据中心制冷需求,笔者基于气流组织、供回水温度和冷却系统部件及形式3个方面,对数据中心冷却系统的发展现状进行了总结分析,得出如下结论:

1) 在气流组织方面:采用架空地板送风和冷/热通道封闭技术不仅可以有效改善气流组织热性能,消除局部热点,还能够提升机房送风温度,进而降低冷水机组工作负荷,提升系统能效。研究表明,采用冷通道封闭,机柜进出口温度可降低2~3℃,温度均匀性提升。未来数据中心要注重探索多组合送风和智能化送风。

2) 在供/回水方面:一方面要提高冷冻水供/回水温度,冷冻水供水温度每提高1℃,冷水机组能效可提高2%~3%;另一方面要增大供/回水温差,降低水泵能耗,提高系统节能效果。在提高冷冻水供/回水温度和大温差时,既要强化节能降耗的主导作用,又不可忽视其附带的不利影响,应统筹考虑,综合评判。

3) 在冷却系统部件及形式方面:从系统局部提效来讲,采用磁悬浮离心式压缩机、变频控制、管道优化、阀门改造等部件技术改进,可以使机组更加稳定可靠、节能、避免喘振、快速重启等,进而提升系统能效;从系统整体节能来讲,主要是自然冷却和机械制冷复合的冷水机组,其中冷却塔间接供冷和间接蒸发冷却以各自独特的优势得到关注,能够有效提高自然冷源利用率,降低冷水机组工作负荷。但在实际设计应用时,应结合所处环境,因地制宜,采取合适的供冷系统。

本文标题：数据中心冷却系统研究及应用进展

本文链接：//www.hsggzxc.com/faq3/932.html
[版权声明]除非特别标注，否则均为本站原创文章，转载时请以链接形式注明文章出处。