BGP高性能并行存储系统技术方案.docx

BGP高性能并行存储系统技术方案目录BGP高性能并行存储系统技术方案11 项目需求分析41.1 概述41.2 高性能计算机集群存储系统的需求和特点：42 存储系统方案设计52.1 存储系统方案拓扑62.2 方案概述62.3 DDN SFA12K-20存储系统73 DDN服务支持113.1 DDN售后服务支持方案113.2 培训134 成功案例144.1 DDN在全球石油气领域客户144.2 中国石油东方地球物理公司（BGP）高性能存储方案154.3 中国石化石油勘探开发研究院高性能存储解决方案174.4 Saudi Aramco地震数据处理存储方案185 DDN公司简介196 附录226.1 技术规格书逐条响应表：226.2 技术评价关键条款和一般条款逐条应答表346.3 投标方案配置表及技术偏离表366.3.1 方案配置表366.3.2 技术规格响应/偏离表37项目需求分析概述为了满足BGP（东方地球公司）业务系统对存储性能和容量扩展需求，DataDirect（DDN）凭借全球HPC及石油勘探领域的丰富经验为用户提供基于DDN SFA12K-20高效能存储系统方案，搭配GPFS并行文件系统，满足用户对大容量高带宽存储应用需求，它可以在业务需求改变时，线性灵活独立的扩展性能和容量，不仅能够降低横向扩容存储的复杂性，还能够通过移除存储群集的延迟元素，以提高存储的响应性，以最大限度的灵活性，应对其大数据对系统架构海量数据的规模和吞吐量需求。高性能计算机集群存储系统的需求和特点：高性能计算集群中在多个节点进行大规模并行计算的同时，需要进行大量文件及数据访问，对系统的存储性能也提出非常高的要求，系统对存储系统要求主要归结为以下几点：全局统一命名空间高性能集群相比较于其它应用而言，一个显著的特点是为了保证与集群中个节点间具有一个统一的命名空间，也就是说在集群中任何一个节点，对一个文件的读写、修改都会在其它节点生效，实现这一个功能，往往需要通过网络文件系统来实现，比较常见的实现方式是NFS。当前，由于集群规模的不断增大和对存储访问性能的要求逐渐提高，并行文件系统在高性能集群中的使用也越来越广泛。高性能对于集群规模较大，或高IO应用的集群用户，由于对存储的访问量很大，对共享存储的访问性能也提出了很高的要求。通常在硬件方面，可以通过提升存储磁盘阵列的性能、存储介质的性能、存储阵列访问接口性能和IO节点网络性能等，来提高整个共享存储的性能，而对于更高IO需求的系统，可以在软件层，通过并行文件系统来实现海量文件高速并发读写。高密度、大容量、可扩展性由于高性能集群规模不断扩大、数据处理能力惊人、业务数据成倍增长，对高性能存储容量需求也是非常惊人，在某些对海量存储需求的系统中，存储量往往可达到TB级甚至PB级。高密度、大容量、可扩展性存储系统，在用户管理、能耗、扩容性为用户提供了未来存储系统发展的最佳选择。高可靠、高可用性高性能集群承担着重要的业务和科研任务，用户的数据具有极高的价值，同时，存储系统为全局系统，一旦出现故障，将导致整个系统不可用。所以在高性能存储系统中，无论是IO节点、存储交换机、还是存储磁盘阵列、存储介质等，每个环节都要尽可能的保证高高可靠和高可用性。存储系统方案设计根据BGP研究院并行存储项目建设要求，DDN提供高效能存储系统方案如下：DDN SFA12K-20高效能存储系统，以DDN SFA12K-20产品为硬件平台，配置GPFS并行文件系统，并配置8台服务器作为文件系统NSD Server节点。存储系统方案拓扑DDN SFA12KX-20高效能存储系统拓扑方案概述方案建议采用Datadirect Networks（DDN）的SFA12K-20高效能存储存储系统，配置一对互为冗余的SFA12K-20控制器，3个DDN SS7700扩展柜（每个扩展柜有60个磁盘插槽），132块4TB 7.2K RPM 6Gb/s NL SAS硬盘（另提供10同型号、品牌块冷备不计入总存储容量），其裸存储容量为512TB，可用容量大于等于400PB。方案使用GridScaler（GPFS）文件系统，配置有8台IO节点服务器，每台服务器配置1个双端口FDR HCA卡，用于GPFS NSD服务器节点与SFA12K存储系统直接存储互联；2*10GbE万兆网卡，用于GPFS NSD服务器节点与计算节点之间数据交换，方案裸设备实测带宽约12GB/s,文件系统实测读写带宽约10GB/s，IOPS实测持续读写平均值大于100000。方案架构各部分采用全冗余设计，最大程度上保障整个存储系统文档性，另外DDN SFA12K-20 存储系统具有高可扩展性，支持在线扩容，可最大程度保障用户扩容需求。本方案中存储系统NSD服务器节点通过万兆与计算节点相连，同时如果计算节点