服务器水冷 HPC水冷 要还是不要？

　　这套HPC是欧洲高级计算合作关系(PRACE)在高性能计算领域内的项目之一，是这一计划在欧洲最核心的、“Tier-0层”的计算平台，将面向全欧洲的科学及工程计算研究人员开放。

　　全新的SuperMUC采用的是联想System x iDataPlex服务器系统，初期以32GB(阶段1)和64GB(阶段2)内存配置的瘦节点以及少量256GB内存的胖节点为主要架构，它包括了18个以英特尔Sandy Bridge EP为核心的瘦节点“岛”、6个英特尔Haswell EP为核心的瘦节点岛以及1个以英特尔Westmere EX为核心的胖节点岛。

　　每个节点岛拥有512个服务器节点，每节点皆为双路服务器，单个节点岛最大的处理器核数为8192个核心，按照512 x 2 x8计算，这一数字应当为八核心的Westmere EX处理器的胖节点岛，目前英特尔至强E5 v3的处理器(Haswell EP)核心数量最多为18个核心。

　　阶段1和阶段2的瘦节点分别采用FDR10和FDR14 Infiniband连接，胖节点则通过QDR InfiniBand连接。此外，在这一集群中还包括一个名为SuperMIC的集群，这是一个每节点都安装两个英特尔Xeon Phi加速卡的共计32节点英特尔Sandy Bridge EP处理器的混合计算集群。

　　据官网显示，它的内存容量总数约为194TB，仅是第一阶段系统的占地面积就高达21m x 26m，耗电量只有大约1.1兆瓦特，后端并行存储容量约为15PB，归档和备份系统的容量则超过30PB。

　　全新的SuperMUC采用SuSE Linux企业服务器(SLES)作为操作系统，GPFS并行文件系统，通过Icinga和Splunk进行系统监控。

　　服务器水冷 HPC水冷 要还是不要？

　　SuperMUC阶段1加阶段2的架构示意图，可以看到左侧是全新的英特尔至强E5 v3的计算集群。

　　为什么SuperMUC要单独拿出来说一说呢?当然，这是联想收购IBM System x之后，位列在全球TOP500排行榜中排位最高的HPC系统，而联想也是此次TOP500排行榜最大的赢家，这不仅是联想的成功，也是中国HPC行业有机会尝试触碰到全球最高领域的机会，但这还不是SuperMUC备受关注的主要原因。

　　温水散热?用在SuperMUC上可不是玩笑

　　2014年收到为LRZ设计建造这套HPC的邀约时，设计团队计算采用创新的温水散热系统(Warm Water cooling)，这一系统据称效率是常规风冷散热技术的4000多倍，可大幅节省40%的制冷散热成本。

　　LRZ的SuperMUC水冷的进水温度高达40-45摄氏度(据联想方面透露，应该是45度)，冷却用水由被称为“free-cooling”的外部散热供水系统系统，由于德国常年气温不超过35度，因此40-45度的水温可以很轻松的获得。

　　服务器水冷 HPC水冷 要还是不要？

　　SuperMUC系统，里面每个部件都布满了水冷管，是全球首款采用温水散热的商用HPC系统。

　　听起来40-45度的“温水(接近热水)”散热与传统数据中心的散热完全不是一个概念，毕竟传统数据中心的冷却水温度都在16摄氏度左右，出口的水温也只是在20摄氏度左右，几乎没有温水的使用，因为“人们总是想要更低温度的水”。

　　但其实40-45度的温水进行冷却完全没问题，早在2010年，瑞士苏黎世理工学院安装的HPC系统Aquasar就采用了温水散热系统，碳足迹减少高达85%，那么Aquasar的温水是多少摄氏度?60摄氏度!据称，处理器可以承受的最高温度为85-90摄氏度，出口水温65摄氏度的Aquasar为苏黎世理工学院的园区提供了取暖及其他用途的热水。

　　SuperMUC出水口的热水可以为园区内的其他生活建筑供热或用于其他用途，据称这一系统可以节省125万美元的开支。

　　在温水散热的低能源消耗帮助下，SuperMUC的PUE值高达1.1，整机效能高达90.95%，联想方面给出的资料显示：5年整体电费下降37%(从27.6M欧元降至17.4M欧元，节省超过1000万欧元)

　　服务器水冷 HPC水冷 要还是不要？

　　SuperMUC(阶段1)的占地面积示意图，上方的黄色和橘黄色管线就是水冷系统及水冷管。

水冷网www.shuileng.net报道这套HPC是欧洲高级计算合作关系(PRACE)在高性能计算领域内的项目之一，是这一计划在欧洲最核心的、“Tier-0层”的计算平台，将面向全欧洲的科学及工程计算研究人员开放。 全新的SuperMUC采用的是联想System x iData...