解析地球上最快的计算机——JAGUAR

技术规格之Spider文件系统

基于Lustre的文件系统Spider将渠道NCCS网络上的多个文件系统，形成一个统一的可扩展系统。Spider提供了对来自NCCS所有平台的亿亿级数据集的集中访问路径，因此避免了数据孤岛的出现。计算机和其他系统之间的文件传输将不再是必需的。例如，在Jaguar和虚拟化系统之间传输petascale数据集可能需要数小时时间，不仅占用了Jaguar的带宽，而且还使得仿真进程变得十分缓慢。取消文件传输将提高性能、便利性和降低成本。数据分析平台将受益于Spider的高带宽特点，而无需在尖端存储系统上投入大量资金。

为了访问Spider，NCCS平台配置了Lustre路由器。这些路由器允许计算机节点上Lustre客户访问Spider，就好像存储是在本地附加的一样。其他所有Lustre组件将保留在Spider基础架构中，提供易于维护性、计算机平台服务中断情况下的可访问性以及能够扩展文件系统性能和容量的能力。

采用一个中央文件系统需要加强冗余和容错等特性。Spider设计可防止发生单点故障，因此最大限度上提高了可用性。通过利用Lustre文件系统的故障转移对，多个网络路径和弹性特点，Spider提供了一个可靠的中央存储解决方案。

Spider文件系统规格

以前的存储系统只是简单地由高性能RAID组成，直接与计算平台连接。而Spier则是一个大规模存储集群。48 DDN S2A9900提供后端目标存储，每秒带宽超过240GB，13440个1TB硬盘提供了超过10PB的RAID6容量。用户可通过192个戴尔双路四核Lustre OSS服务器访问这个目标存储，该服务器提供了超过14 teraflops的性能和3TB的RAM容量。每个目标存储服务器提供的每秒带宽比文件系统级性能高出1.25GB。元数据被保存在2个LSI Engino 3992上，由3台戴尔四路四核系统提供服务。这些系统通过可扩展的I/O网络进行互连，为Spider提供了一个高性能背板。