1、数据中心概况
该IT企业大楼位于上海郊区某科技园区,共5层,建筑面积约为25000平方米,本文研究的数据中心位于该大楼5层中心位置,呈长条形布置,4个数据中心的面积分别为286,164,104,144平方米。数据中心的正上方屋顶上设有1.8m高的平台,用于放置大楼的空调处理设备,平台下则放置了与数据中心有关的排风设备以及用于数据中心全新风制冷的新风百叶,既保证了设备的隐蔽性和安全性,又防止雨天或者其他特殊天气对数据中心空气调节带来的影响。
2、空调系统设计
2.1数据中心房间设计温湿度
数据中心和网络系统的IT设备会产生大量集中的热量,同时部分设备对温湿度的变化极其敏感。根据设备供应商提供的数据,数据中心IT设备要求的运行温度为24℃,相对湿度为30%~80%。
2.2冷负荷和风量的计算
IT设备消耗的电量为1600W/平方米,由于IT设备是纯散热设备,所以在计算房间负荷时,考虑所有耗电量转换为房间冷负荷,且同时使用系数取100%,1#,2#,3#,4#数据中心面积依次为286,164,104,144平方米,从而得出4个数据中心的冷负荷依次为457.6,262.4,166.4,230.4kW。得到了数据中心的冷量和房间的温度后,可以算出所需风量,但是值得注意的是,在计算总送风量时,根据设计经验,增加10%的系统冗余以保证由于漏风等造成的损失。
2.3系统方案的确定
在进行空调设计时所遵循的核心思想是在满足设备基本温湿度要求的基础上,尽可能多地运用各种节能手段并且兼顾系统的稳定性、安全性和多样化。
2.3.1风侧系统
1)在数据中心内设置单独的机房空调(CRAC),既承担数据中心的冷负荷,又独立于整个大楼的送风系统。
2)机房空调采用下送上回方式,冷风被送至架空地板下,整个架空地板作为一个送风静压腔,然后通过架空地板上设置的部分穿孔将冷风送至房间内各IT机柜。房间回风通过吊顶回风口进入吊顶内,整个吊顶以上的空间作为一个回风静压腔,然后通过安装在吊顶内的回风风管,回到机房空调进行循环冷却。
3)由于大楼的中央冷水机组于室外温度低于15℃时停止使用,但是数据中心全年需要供冷,所以给数据中心设计了新风供冷模式。4个数据中心分别位于大楼两侧的顶楼,给新风供冷模式时引进大量新风创造了有利条件。采用新风供冷模式节约了大部分的能源,笔者将在第5.2节进行分析。
4)机房空调全部安装新风管道并且在数据中心配备排风机进行排风以引进新风,排风机设置变频器以控制数据中心的房间始终为正压10Pa,并且在过渡季节,通过变频器实现新风供冷,减少了风机的能耗。
2.3.2水侧系统
1)在正常模式下,1#~4#数据中心的所有机房空调采用冷水制冷而非乙二醇溶液制冷,以得到更高的COP。冷水来自中央制冷机房的冷水机组,冷水管路单独设置,以确保与整个大楼空调的管路系统相互独立。
2)考虑到会出现冷水系统故障或者节能模式运行的排风机故障或者大楼意外断电,为3#数据中心和位于其他楼层的弱电机房单独设置了一台冷水机组(以下简称“高效冷水机组”),以确保这些房间的空调能24h不间断供冷。高效冷水机组要求同样具有新风供冷模式,该机组的制冷剂为乙二醇溶液,当室外温度低于乙二醇溶液回水温度时,通过机组自带的三通阀将部分乙二醇溶液引入机组的新风冷却盘管,利用新风进行直接供冷,以达到节能的要求。
3)考虑高效冷水机组会出现故障,设置一台带应急电源的风冷冷水机组作为备用。
4)由于中央冷水机组提供普通冷水而高效冷水机组和备用冷水机组提供的是乙二醇溶液,所以要求机房空调采用双盘管双水源系统,以达到两种模式的切换。
2.3.3空调系统的控制
1)每个房间的机房空调设置集中控制器,以执行机组切换、风机启停、水阀开关、盘管切换等动作。
2)高效冷水机组和风冷冷水机组内置控制器对压缩机、冷凝器等进行控制以实现机组的正常运行。
3)设置一个专门的中央控制器用于采集机房空调的集中控制器的数据,切换高效冷水机组和风冷冷水机组并采集其运行状态信号,控制机房空调新风管风阀以及回风管风阀的开度,控制排风机以及变频器。
2.4气流组织设计
在参考了GreenbergSteve博士(伯克利实验室)对美国22个数据中心进行研究统计所得出的一系列经验以及笔者总结以往所参与的项目和实践中的几个经常出现的问题,提出下问题:
1)机柜上部以及周围的热空气短路;
2)由架空地板上电缆桥架穿孔不密封造成空调送风短路;
3)不合理的穿孑L地板的布置;
4)不合理的机房空调的布置;
5)不合理的吊顶空间高度的设计造成过小的回风静压箱;
6)架空地板下大管径的水管或者地板下大量的桥架造成的空气阻塞;
7)机柜前后左右开放的面板造成的空气从热通道到冷通道的短路;
8)由于机柜内部阻力太大造成的内部空气不流通;
9)一些IT设备采用侧面排风(通常机柜都是前进风,后出风);
10)架空地板下静压腔的压力过大或过小。
要避免以上所列举的问题,笔者在设计时考虑采用如下措施:
1)使用“热通道和冷通道”的安排模式来设置机柜,在冷通道的两边分别没置两排机柜,使得两排机柜的进风口面对面设置,同样,两排机柜散热的背面也分别在热通道的两侧;
2)密封所有架空地板上的桥架开孔和桥架上由于电缆分布而设置的开孔;
3)封住机架上所有不使用的空间或者面板上的开孔,减少冷量损耗以及避免空气短路;
4)合理布置穿孔地板的位置;
5)合理布置机房空调的位置以及正确计算空调的各个参数;
6)尽量在机柜的上方收集所有的热风进入吊顶静压箱内或者风管内;
7)将架空地板下大管径的水管布置在机房空调的后下方(设备机房可以稍稍离开墙壁以留出地板下的空间布置水管);
8)架空地板下的主桥架也尽可能靠墙布置。
综上所述,在选择穿孔地板类型时应综合考虑透风率和布置位置并且选择带风阀的穿孔地板以便日后进行风量平衡调试。然后根据机柜的冷量计算所需风量,以2m/s的速度计算穿孔板所需的截面积,从而确定穿孔板的数量。吊顶回风格栅的设置同样遵循以上原则。
3、设备选型
3.1机房空调的选型
3.2排风机的选择
由于过渡季节大量的新风会进人数据中心,需要强制排风,并且考虑到数据中心的防排烟设计,所以设置屋顶排风机。根据机房空调的数量配备排风机,每个数据中心设置1台排烟风机。排风机技术参数见表2。EF/1~3服务于1#数据中心,EF/4~8服务于2#数据中心,EF/9~10服务于3#数据中心,EF/11~13服务于4#数据中心。
4、数据中心的能耗分析
对4个数据中心的用电能耗进行了统计。IT设备的能耗为9784920kWh/a,制冷机能耗为1900920kWh/a,机房空调的能耗为765624kWh/a,冷却塔和水泵的能耗分别为131400kWh/a和486180kWh/a,照明能耗为61145kWh/a。直观地显示了数据中心设备耗电量的分布,其中,主要的耗电设备是IT设备本身,所占比例为74.5%,除了要求在IT设备的设计和选型时尽量选择节能型产品外,25%的空调耗电量也不容小觑,空调工程师应该运用各种节能手段对空调系统进行优化。
5、节能系统运行费用和投资回收期
数据中心主要的节能模式有中央机房冰蓄冷系统、过渡季新风供冷系统、一次泵变流量系统、冷却塔风机带变频器、带新风冷却的高效冷水机组、带高效盘管的机房空调、高效的电动机等等。本文将就节能比较显著的冰蓄冷和过渡季新风供冷系统进行运行费用的比较和投资回收期的计算。
5.1采用冰蓄冷系统的节能分析
在该项目的空调设计中,配备了2台1050kW的冰蓄冷螺杆制冷机和1台容量较大的制冷机。22:00~06:00由2台冰蓄冷螺杆机进行蓄冰,白天电价高峰时进行融冰,供应部分数据中心的空调制冷,考虑到数据中心的冷量非常稳定且集中在特定房间内,所以可以平均分配夜间所蓄冷量(忽略融冰损耗),对冰蓄冷设备的运行费用进行了分析,其中蓄冰空调系统耗电量的计算只包含了制冷机房中的乙二醇主机、乙二醇泵、冷却水泵,冷却塔的电量,常规空调系统的耗电量只含制冷机房中的冷水机组、冷却水泵,冷却塔的电量,其他部分两种系统基本相同,故未加考虑。
5.2采用过渡季节新风供冷系统的节能分析
当采用过渡季节新风供冷系统时,服务数据中心的设备仅仅是机房空调和排风机。当室外的比焓小于数据中心内的比焓时,空调的冷源可以采用室外的新风。第2.3.1节中提到过4个数据中心将设置1台中央控制器控制整个数据中心空调系统,室外的比焓值由空气处理设备系统上的新风温湿度传感器采集并计算得到,室内的比焓值为干球温度15℃,相对湿度26%时的比焓,中央控制器根据逐时的比焓比较来控制新风阀门的开度。根据上海市历年逐时温湿度数据统计了过渡季节新风供冷系统和日常冷水机组系统的运行费用,并对前者的运行成本进行了分析。从中可以看到,两种系统运行时间相同,全年不间断运行,但耗电量不同。当采用过渡季节新风供冷系统时,耗电量的计算只包含了排风机的用电量,如表中的1—4月和11,12月;当系统的冷源来自中央冷水机组系统时,耗电量包含了1台1050kw螺杆冷水机组、冷水泵、冷却水泵、冷却塔。由于其他部分,例如机房空调,无论何种系统运行能耗都相同,故未考虑其耗电量。
应用以上两种节能方式后,两种节能方式节约的费用约为14000000元/a,约占整栋大楼窄调年运行费用的30%。
6、系统的安全可靠性和多样化
为了保证3#数据中心全年8760h不间断电源(同时也兼顾该大楼中其他有同样要求的房间,如弱电机房、程控交换机房和UPS房间等),设计中对机房空调进行互为备用和多样化的设计。
6.1设备的备用和多样化
1)各数据中心分别设置了N(表示实际需要的设备台数)+1台机房空调,保证任何1台机器发生故障都能有备用空调替代,同时也合理分配了每台机房空调的运行时间,机组的控制和切换由各数据中心的机房空调的集中控制器进行。
2)对于要求较高的3#中心,机房空调配备了双盘管,冷源分别来自不同的冷水机组。设计三路冷水系统,分别是来自中央冷水机组,高效冷水机组以及风冷式冷水机组,保证在任何时候都有两路不同的冷水可供应。中央冷水机组水泵采用一次泵变流量的集水系统,所有水泵互为备用;高效冷水机组和风冷冷水机组分别设置了一用一备水泵。
3)各数据中心分别设置了多台机械排风设备,不仅在过渡季节可利用新风供冷,而且在最差的情况下(假设所有冷水机组都故障的情况下)机房有最基本的通风功能。对于3#数据中心,机房空调和排风机都配备了应急电源。
6.2系统的备用和多样化
除了设备的互为备用和多样化以外,空调系统也要求互为备用和多样化,本项目中根据温度提出了不同的方案,每种方案都保证有3套系统可以互为支持运行。
1)当室外温度高于15℃时,机房空调制冷可以来自于:中央冷水机组+机房空调(冷水盘管),高效冷水机组+机房空调(乙二醇盘管),风冷冷水机组+机房空调(乙二醇盘管)。
2)当室外温度低于15℃时,机房空调制冷可以来自于:排风机+机房空调(无冷水),高效冷水机组+机房空调(乙二醇盘管),风冷冷水机组+机房空调(乙二醇盘管)。
6.3系统的应急性统
对于3#数据中心,所有服务于机房的空调排风机和风冷冷水机组都设有来自柴油发电机组的应急电源。当大楼两路供电都失效时,机房空调的制冷来自:风冷冷水机组+机房空调(乙二醇盘管),排风机+机房空调(无冷水)。
7、结语
对上海某研发大楼4个数据中心的空调系统设计进行了介绍,并从系统设计、气流分布、设备选型、节能方案、系统的安全可靠性和多样化等方面进行了详细描述。数据中心是个纯显热的环境,并且要全年连续运行,根据这一特点,过渡季节新风供冷系统的合理应用可以节约运行费用,结合空调本身的一些节能措施,如冰蓄冷冷水机组、高效率的带全新风制冷的冷水机组、设备中高效率的电动机以及一套智能的独立的数据中心空调的中央控制器,种种节能系统的结合,使得整个数据中心的空调系统设计得到了优化,更使得数据中心的日常运行费用得到了大幅缩减。这种节能设计理念也给空调设计工作者拓宽了思路,更给数据中心运营者提供了更多合理选择。最后,不得不提的是数据中心的空调的多样化和安全性,只有具备了一个多样化的系统,使得数据中心的空调系统能够确保全年不656问断运行,以上种种节能方案才能得以实现。