AI服务器功率上升,管路开始承担“散热主通道”
过去的数据中心主要依靠风冷,管路更多是机房空调系统的配套设施。现在,随着GPU服务器和高密度机柜增加,冷却液需要直接进入机架甚至服务器内部,把芯片产生的热量带走。
国际能源署预计,全球数据中心用电量将从2024年的约415TWh增长至2030年的约945TWh。ASHRAE也指出,一台40~50kW机柜所需风量可能达到约5000CFM,而性能较好的地板送风口通常只能提供约1900CFM。机柜功率继续提高后,单靠增加风量已经很难解决散热问题。
因此,液冷管路不再只是“输送水的管子”,而是关系到服务器温度、运行稳定性和数据中心安全的重要设备。
管路流量要够,还要让每条支路分得均匀
液冷系统首先要保证足够的冷却液流量。以一台100kW的液冷机柜为例,假设冷却液进出口温差为10℃,理论流量约为143L/min;如果温差缩小到5℃,流量就需要增加到约287L/min。
这意味着管径不能随意缩小,弯头、阀门和快速接头也不能过度增加。否则管路压降过大,CDU水泵需要消耗更多电力,末端服务器还可能出现流量不足。
对于机架Manifold来说,问题更加明显。靠近进水口的支路容易“抢水”,远端支路可能流量不足。因此需要通过管径、支路长度、阀门和流阻设计,让每台服务器获得相对均匀的冷却液。
压降不能太大,否则冷却能力会被“吃掉”
冷却液从CDU流向Manifold,再进入服务器冷板,需要经过主管、弯头、阀门、软管和快速接头。每经过一个部件,都会产生一定阻力。
如果管路内部过窄、弯折过多,或者液冷方管在加工后发生明显变形,都可能增加局部流阻。最终表现为水泵压力升高、流量下降,严重时还会导致部分服务器芯片温度偏高。
因此,数据中心液冷管路不能只检查“通不通”,还需要检测额定流量下的压差,并确认最远端服务器仍能获得足够流量。
管路必须承压可靠,还要经得住反复启停
液冷系统运行过程中,水泵启停、阀门切换和快速接头插拔都会造成压力变化。某根管道第一次打压不漏,并不代表长期运行一定安全。
ASHRAE指出,数据中心液冷部件需要根据所连接的冷却回路,考虑静态压力和动态压力,并进行相应的压力与泄漏测试。现场安装的连接管路还应在服务器设备安装前完成检测,避免测试过程影响已经上线的IT设备。
所以,主管、焊缝、接头、密封圈和阀门不仅要达到工作压力要求,还要考虑长期压力循环、材料疲劳和密封老化。
防漏不能只靠“把接头拧紧”
液冷管路的下方往往是服务器、电源和网络设备。一处很小的慢漏,也可能造成设备停机甚至较大的经济损失。
ASHRAE建议,大型液冷系统的架空管路尽量布置在通道上方;当管路必须经过高价值设备上方时,应设置接水盘、漏液检测和排水措施。
实际设计中还应配置漏液传感器,并与CDU、水泵或电动阀门联动。一旦发现漏液,系统可以及时报警、关闭阀门或降低压力,而不是等工作人员看到地面积水才处理。
管路内部要干净,细小杂质也可能堵塞冷板
液冷系统中的冷板流道非常细。ASHRAE资料显示,一些冷板内部的通道或翅片间距只有零点几毫米。管路中的焊渣、铁屑、密封胶碎片和水垢进入冷板后,可能造成局部堵塞。
针对部分非CDU系统,ASHRAE给出的示例建议是:当冷板通道约为0.7~1.0mm时,可考虑采用100μm或更小的过滤精度,以减少颗粒在冷板内部堆积。
因此,管路安装完成后要进行清洗、冲洗和过滤,并检查压差变化。不能只把水灌进去,确认没有漏水就直接连接服务器。
Manifold管路还要控制直线度和扭曲度
Manifold需要同时连接多台服务器。如果管体发生弯曲、扭曲,或者焊接后的支口位置偏移,快速接头可能出现对不准、插接阻力大、密封圈受力不均等问题。
特别是在盲插式Manifold系统中,服务器推进机柜后需要自动完成液路连接,对接口高度、方向、间距和管体姿态的一致性要求更高。OCP已经发布Open Rack V3盲插式Manifold规范,说明接口一致性正在成为液冷系统标准化的重要环节。
因此,液冷方管生产完成后,不能只用直尺或肉眼检查,还需要测量全长直线度、扭曲度、截面姿态和接口位置。
3D校直校扭可解决焊接后的管体变形
液冷方管在挤压、切割、焊接支口和热处理过程中,容易同时产生弯曲与扭曲。如果只校直、不校扭,接口方向仍可能偏移;如果只处理扭曲,管体直线度又可能受到影响。
针对这一加工难题,深圳信仪测控研发了液冷方管3D校直校扭一体机。设备通过线激光3D视觉检测管体直线度、扭曲度和轮廓数据,再由智能算法判断先校直还是先校扭,在同一台设备上完成闭环修正。
根据深圳信仪测控提供的设备参数,在工件来料和工艺条件匹配的情况下,设备可将液冷方管校直精度控制在全长0.1mm以内,节拍可达到约60秒/米。相比依靠人工反复测量和敲压,3D检测与自动校正更有利于提高批量产品的一致性和数据可追溯性。
一套合格的液冷管路要同时通过多项检查
判断数据中心液冷管路是否合格,不能只看是否漏水。还要检查流量是否足够、各支路是否均匀、压降是否合理、材料是否耐腐蚀、内部是否洁净、供液温度是否安全,以及Manifold接口位置是否准确。
对于液冷方管生产企业来说,直线度和扭曲度也不能等到机柜装配时才发现问题。把3D检测、自动校直校扭和数据记录提前放到生产环节,才能减少装配返工和接口泄漏风险。
液冷管路关键要求速查
检查项目 | 核心要求 | 常见风险 |
流量与压降 | 流量充足、支路均匀、末端供液稳定 | 局部过热、泵耗升高 |
密封与承压 | 通过泄漏、静压和压力循环测试 | 慢漏、密封老化 |
洁净度 | 清洗、冲洗、过滤并监测压差 | 颗粒堵塞冷板 |
材料兼容 | 管材、密封件与冷却液相容 | 腐蚀、析出、膨胀 |
温度控制 | 供液温度高于机房露点 | 管壁结露 |
Manifold精度 | 控制直线度、扭曲度和接口位置 | 接口错位、插接困难 |
常见问题FAQ
1. 数据中心液冷管路最重要的要求是什么?
流量稳定、低压降、不泄漏和长期运行可靠。
2. 液冷管路为什么需要过滤?
颗粒杂质可能堵塞冷板内部的微小流道。
3. 液冷管路温度越低越好吗?
不是,温度低于空气露点可能产生冷凝水。
4. Manifold弯曲会造成什么问题?
可能导致接口错位、插接困难或密封不均。
5. 液冷方管为什么要同时校直和校扭?
因为弯曲和扭曲会相互影响,需要同步控制。