从PUE数值到真实能耗:绿色数据中心的隐形账
2023年9月23号,我在南京江北新区的一栋低层机房里,跟着运维组的张工蹲在冷通道的地板边,指尖沾了一层冷凝水。他指着墙上的显示屏说,现在PUE已经压到1.18了,离当地的政策奖励线还差0.02,可上个月的电费还是比年初涨了18%。
我当时没太懂。
直到后来翻了他们的能耗台账才反应过来,大家盯着的那个PUE数字,根本算不清真实的能耗账。
数字之外的真实能耗账
PUE的统计边界,一直是机房建筑的内部范围。也就是说,从园区外接的10kV输电线损、冷却塔补水的水处理能耗、甚至为了等保要求留的备用设备空转损耗,全不算在这个数值里。
张工他们的机房,从园区变电站到低压配电柜的线路总长1.2公里,每年的线损就有12万度。为了给冷却塔补循环水,他们在园区里打了一口80米的深井,抽上来的地下水要经过三层过滤、软化处理才能进冷却塔,这套水处理系统每年的能耗是17万度。最冤的是那部分备用服务器——按等保三级要求留的20%冗余算力,平时全是空转,每个月的电费比整个运维团队的工资总额还高。
IT设备自身的负载率每降低10%,数据中心的整体真实能耗会上升7%-9%。这个数字我后来在江苏的三个不同规模的机房都验证过,没有例外。
南京江北数据中心冷通道封闭实景
很多项目为了拿到PUE达标奖励,会在测试时段把制冷功率拉到最高,甚至临时关掉非必要的辅助设备,测出来的数字好看,实际运行的时候该怎么耗还是怎么耗。这种自欺欺人的操作,最后还是要靠企业自己的电费买单。
不是所有制冷技术都能照搬
现在行业里一提到降能耗,第一反应就是上液冷。张工他们去年也试过,给边缘计算节点换了浸没式液冷,结果刚用了半年就出了问题。
南京的全年平均空气湿度在72%以上,梅雨季的时候墙面甚至会凝水。浸没式液冷的管路密封件在高湿度环境下老化速度比干燥地区快三倍,他们每三个月就要换一批密封件,每次的更换成本,比省下来的制冷电费还高。
说实话,我之前见过太多项目为了拿政策补贴,不管自身负载情况就硬上液冷,最后运维成本压得喘不过气。液冷技术的适用前提,是IT设备负载率长期高于60%,且全年环境温度波动幅度小于15℃。如果是那种负载波动极大、仅在电商大促或月末结算时段才会达到峰值负载的业务,全年平均负载率往往不足30%,强行上液冷反而会因为管路预冷、密封件保温等冗余设计增加初始投入,回本周期会从传统风冷的3年拉长到8年以上。
服务器浸没式液冷管路密封结构示意图
还有人说要在屋顶铺满光伏,靠绿电降能耗。张工他们算了一笔账,整个机房的屋顶面积是2100平,铺满光伏板一年的发电量大概是24万度,只够整个机房2%的用电。而且光伏发电是波动的,数据中心的供电要求是连续稳定,要接光伏就得配储能,配储能的成本摊下来,比把闲置服务器做虚拟化整合的投入高了四倍。同样的钱花在算力整合上,能省15%的总电费,这笔账怎么算都不亏。
不过话说回来,也不是说液冷、光伏这些技术没用,只是得看场景。比如在贵州的干燥地区,液冷的密封件老化速度慢,当地的气温全年波动小,液冷的能耗优势就能发挥出来;如果是在西部光照充足的地区,光伏的发电小时数是南京的两倍,配少量储能就能供10%的用电,这时候上光伏才划算。
为可靠性多掏的电费,怎么算才值
为可靠性多掏的电费,怎么算才值
数据中心的冗余配置,一直是个两难的事。配少了怕宕机,配多了又浪费能耗。
现在很多项目的冗余配置,都是统一按最高的等保标准来的,不管里面跑的是什么业务。比如张工他们的机房里,有一块存历史备份数据的冷存储区域,本来RTO要求是4小时以上,结果配了和核心交易节点一样的N+2制冷冗余,甚至也上了和核心区一样的精密空调,这部分的能耗占了整个机房总能耗的18%。
我之前接触过江苏的一家制造企业,他们的异地灾备中心就是这么配的——一开始图省事,全按最高标准做冗余,每年的电费比预算多了300多万。后来他们花了两个月梳理所有业务的RTO要求,把冷存储区域的冗余等级降到N,甚至把精密空调换成了普通的风冷机组,只保证每年的宕机时间不超过8小时,结果去年一年省了270万电费,也没出现过一次业务中断。
冗余配置的合理性,应该和业务的RTO要求绑定,而不是统一按最高标准配置。RTO要求小于15分钟的核心交易业务,配N+2的冗余是完全合理的;但RTO要求大于4小时的备份存储,完全可以降低冗余等级,甚至用自然冷源代替机械制冷,只要能满足业务的可用性要求,多花的电费就是浪费。
现在很多人一提算力调度,就觉得要把所有数据都往西部的能源富集区搬。但很少有人算过传输的能耗——把1TB的频繁读写数据从南京传到贵州,来回的网络传输能耗就有12度电。如果是那种需要毫秒级响应的交易类业务,把数据传到西部去,省下来的制冷电费,还不够付网络传输的能耗。
别一听“东数西算”就觉得所有数据都要往西走,真的要看业务的读写频率,对吧?那种冷存储、离线计算的业务,搬到西部去确实能省能耗,但需要频繁读写的业务,还是留在东部更划算。
上周张工给我发了条消息,说他们把那部分空转的备用服务器做了虚拟化整合,上个月的电费比去年同期少了22万。现在他们不用再盯着墙上的PUE数字发愁,算的都是实打实的能耗账。