液冷从试点推向生产环境会带来新的挑战,本文将梳理规模化部署直接液冷(DLC)的八项关键考量。
AI基础设施的现实已经到来:以NVIDIA Blackwell为代表的当前一代高功耗芯片,已使传统风冷不再适用。机架功率密度从20 kW攀升至140 kW以上,1 MW机架里程碑也日益临近,行业正从推测性规划转向紧迫且高风险的部署阶段。直接液冷(DLC)已成为IT行业应对极端芯片功率密度的首选冷却方式,但从中小规模试点跃迁到完整生产环境,仍充满技术陷阱。以下详述DLC部署中常见的8项挑战及应对建议。
选型与规格挑战
挑战1、CDU与相连部件之间的材料不兼容,会提高电偶腐蚀风险,产生的碎屑可能堵塞冷板并损坏服务器。
运营方应尽量缩小所有润湿表面材料在阳极指数上的差异,并严格遵循IT厂商关于兼容材料的指导。
挑战2、液冷与风冷的需求相互冲突,迫使运营方在运行节能与冷冻水系统资本开支之间权衡。
用水冷却IT设备时,冷冻水温度可比风冷方案设得更高。冷冻水温度每提高0.6°C(1°F),冷机效率可提升1%—2%。
较优路径是开展10年以上的总拥有成本(TCO)分析,再决定是共用现有低温冷机,还是新建专用高温冷机。
挑战3、服务器与DLC基础设施直接耦合,使规格设计更复杂:冷却管路与IT设备物理连接,带来空间、泄漏风险及特定冷却液流量需求等新变量。
应与IT及基础设施厂商紧密协作,选定兼容的快接接头,并为单一服务器型号配置独立冷却环路,避免冷却不均。
挑战4、CDU系统效率标准缺失,使不同CDU的容量和效率评级难以直接比较。
流体类型、流量、流体温度和环境温度等变量都会影响CDU的效率或容量评级。风冷已有相关标准,液冷尚缺。在ASHRAE正式测试标准定稿前,可要求厂商提供基于草案测试点的性能评级。
挑战5、为未知液冷IT设备预留空间,存在管路选型过大导致过度投资,或冷却容量闲置的风险,因为系统必须为未知的最高和最低机架密度做准备。
为缓解这些变量影响,主管路管径可按CDU总容量选型,并确保管路长度足以覆盖最大机架数量(即最低密度场景);但分支管路和分液歧管应按潜在最高机架密度选型。
安装挑战
挑战6、防止技术冷却系统(TCS)污染的复杂性,会因污垢、微生物滋生、腐蚀或结垢而显著提高服务器损坏风险。
应在设计和安装阶段主动应对:限制单个冷却环路的规模,有助于控制污染范围;安装时在洁净环境中组装部件,初次注液前加入杀菌剂,并在连接任何IT设备前彻底冲洗环路、排尽空气。
运营挑战
挑战7、冷却厂商与服务器厂商的保修责任边界不清,会带来额外压力,一旦发生泄漏或部件故障,容易出现相互推诿。
可通过让IT厂商就统一的TCS供水温度、流量和压力达成一致来划清边界。在规格制定早期,明确安装商、冷却厂商和IT厂商之间的运维责任。审查所有保修条款,确保所要求的维护步骤(如更换过滤器)不会导致另一厂商保修失效。
挑战8、DLC系统对GPU功率瞬变响应偏慢,在AI训练负载常见的突发功率尖峰期间,存在昂贵GPU过热的风险。
可通过软件对GPU进行功耗封顶,但这会拖慢AI训练时间。更好的运营方式是执行严格测试计划:以较低利用率启动服务器,随着负载提升持续监控GPU温度。若温度接近危险水平(如90°C),可降低冷冻水供水温度(如降低5°C)以提高换热速率,或提高冷却液流量。
液冷与芯片交汇之处
从概念验证试点走向稳健、可量产部署的液冷环境,需要在数据中心全生命周期内,对规格设计、安装和运营管理方式作出根本转变。AI就绪基础设施的复杂性,已不容许各环节各自为战。
有了正确的技术框架,液冷才能成为可持续、高性能AI增长的基础。
作者:Tuan Hoang,施耐德冷却技术与产品开发负责人
文章转载自施耐德,仅做技术分享所用,如有侵权请联系删除。

