硬件环境 |
东南大学大数据计算中心面向全校提供高性能计算与云计算服务,其硬件设施共包括IBM集群,HPE集群和浪潮集群共超过501个计算节点9776 CPU核、142块NVIDA V100 GPU卡、8块K40GPU卡以及5PB裸存储。 其中IBM集群中294个计算节点分别采用IBM HS22和IBM Flex X240刀片服务器作为并行计算节点;配置10台X3850 X5企业级计算服务器,其中6台为4路胖节点,2台为8路胖节点,2台为云计算管理节点;配置16台X3650作为IO节点连接一套880TB的DS3500存储系统实测读写带宽超过5GB/s。 HPE集群中98个计算节点采用的是HPE BL460刀片服务器作为并行计算节点,19台机架式服务器作为大数据、GPU、云控制、登陆管理节点,另配一套DGX-1 GPU高性能计算节点,共配置了8块Nvidia K40c GPU卡和22块Nvidia V100 GPU卡。 浪潮集群14个计算节点设计了两类计算功能节点:1. 采用10台浪潮NF5468M5双路服务器作为GPU计算节点,节点配置2颗 Intel(R) Xeon(R) Gold 6226 CPU,主频2.7GHz,配置512GB 内存,配置四块960GB本地SSD硬盘;每台配置8块NVIDIA Tesla V100 32GB ,GPU双精度浮点运算理论峰值达到624TFlops;2. 采用4台浪潮NF5280AM5双路服务器作为胖节点,节点配置2颗AMD 7542 CPU,主频2.9GHz,配置512GB 内存,配置一块300GB本地硬盘;共256个计算核心,浮点运算理论峰值达到2969.6GFlops; 存储部分包括1套1PB HPE Apollo存储和2.2PB DDN SFA7700,以及一套约40TB DDN SFA200NV全闪存存储。 整个系统采用56Gb infiniband高速网络作为存储和计算网络,构建集群高速、低延迟的快速网络。 东南大学大数据计算中心整个系统CPU双精度浮点计算能力理论峰值达到每秒366.5万亿次,GPU双精度浮点计算能力理论峰值为每秒1107.4万亿次,高性能存储容量近5PB,平台整体性能达到国内高校领域领先水平。 东南大学大数据计算中心系统架构图 |