蜂鸟集群介绍.PDFVIP

2 《高性能计算发展与应用》 2012年第三期 总第四十期 蜂鸟集群介绍  戴坚君 上海超级计算中心 上海201203jjdai@ 1.硬件介绍 40Gb Infiniband高速网络连接，整套系统的峰值双精 蜂鸟集群包含65台IBMHS23刀片服务器作为计 度浮点运算能力将近每秒21.6万亿次，总体功耗小于 算节点，分别配置6台与4台x3650M3机架服务器作管 或等于38KW。 理登录和存储节点，配置2台dx360M3图形服务器， 上海超级计算中心高性能计算系统的架构，如 采用Nvidia quadro5000图形加速卡。所有节点间通过 图1所示。 图1上海超级计算中心高性能计算系统的架构 1)计算节点 2块300GB热插拔 1万转SAS硬盘，配置一块单口光 采用65台HS23全高刀片式服务器，每台配置两 纤接口千兆以太网卡，并配置双千兆以太网接口， 路Intel E5-2670处理器(2.60GHz 1600MHz/20MB 8核)， 单口40Gbps QDR Infiniband扩展卡，DVD光驱，可实 8根8GB VLP DDR3内存（共64GB），1块300GB热插 现全冗余的电源。 拔1万转SAS硬盘，双千兆以太网接口，双口40Gbps 3)存储节点 QDR Infiniband扩展卡，可实现全冗余的电源和网络 采用4台X3650M3机架式服务器，配置两路Intel 背板连接。 X5645处理器(2.4GHz 1333/12MB 6核，最高Turbo频率 2)管理/登录/其他节点 2.67GHz)，6根4GB VLP DDR3内存（共24GB），2块 采用6台X3650M3机架式服务器，配置两路Intel300GB热插拔 1万转SAS硬盘，双千兆以太网接口， X5645处理器(2.4GHz 1333/12MB 6核，最高Turbo频 一块双口40Gbps QDR Infiniband扩展卡连接存储，一 率2.67GHz)，6根4GB VLP DDR3内存（共24GB）， 块单口40Gbps QDR Infiniband扩展卡连入IB网络，可 本期专题：”蜂鸟”超级计算机介绍 3 实现全冗余的电源。 网络： 4)图形节点 Cluster Management NETWORK 采用2台dx360 M3图形服务器，配置两路Intel 此网络为千兆以太网络；连接计算节点机柜， X5640处理器（2.66GHz 1066/12MB，4核，最高Turbo 高性能交换机，登录节点及管理节点等；主要用作 频率2.93GHz），12根8GB DDR3内存，共96GB, 2块 xCAT系统管理，启动集群命令执行，系统/软件安装 2TB 7200转近线SATA盘做RAID1，1块Nvidia Quadro等；和GPFS档案系统共享的网络。 5000图形卡，一块单口40Gbps QDR Infiniband扩展 IB高性能交换网络 卡，一块单口光纤接口千兆以太网卡。 针对并行程序等高性能运算的特殊所需， 配置 5)BladeCenter H刀片中心 了一个高性能交换网络（使用3台IB交换机）来连接 所有刀片服务器可以放置在5个9U的BCH刀片中