一、总体概况

长安大学高性能计算平台双精度浮点运算峰值性能达1.05 PFLOPS,由113台计算节点和7台服务节点组成。所有节点通过HDR InfiniBand网络高速互联,并配置一套1.3 PB的高性能并行文件存储系统,可满足大规模科学计算与工程仿真的算力与数据读写需求。

二、计算节点

平台计算节点按资源配置和适用场景分为通用计算CPU节点、大内存CPU节点、GPU节点和图形节点四类,合计113台。其中,通用计算CPU节点95台,承担常规计算任务;大内存CPU节点6台,单机内存不低于1 TB,面向数据规模大、内存驻留要求高的计算任务;GPU节点10台、图形节点2台,两类节点共配置加速卡72张,包括A100卡8张、A800卡44张、A40卡16张、RTX 3090卡4张,分别承担GPU加速计算、大显存计算以及图形建模与前后处理任务。各类计算节点的详细配置如下表所示。

节点类型

节点数量

配置

操作系统

主要用途

备注

通用计算

CPU节点

66台

64核 / 256GB

RedHat 8.3

常规CPU计算

 

16台

40核 / 192GB

RedHat 7.8

仅限Materials Studio(MS)计算

旧节点

4台

64核 / 512GB

kylin-server-V10

ARM架构计算

鲲鹏服务器

9台

64核 / 256GB

RedHat 7.8

常规CPU计算

公共节点

大内存

CPU节点

4台

96核 / 1TB

RedHat 8.3

大内存CPU计算

 

2台

80核、40核各1台

RedHat 7.8

大内存CPU计算

旧节点

GPU节点

5台

8卡A800

RedHat 8.3

GPU加速计算、大模型

开启GPU多实例(MIG);高版本GCC编译作业建议加-m参数

1台

4卡A800

RedHat 8.1

GPU加速计算

开启GPU多实例(MIG);高版本GCC编译作业建议加-m参数

1台

8卡A100

RedHat 7.8

大显存GPU计算

未开启MIG

2台

4卡A40

RedHat 8.3 / 8.1

大显存GPU计算

未开启MIG

1台

4卡RTX 3090

RedHat 7.8

GPU加速计算

开启显卡独占模式

图形节点

2台

4卡A40

RedHat 8.3 / 8.1

图形交互与前后处理

高性能图形显卡,未开启MIG

注:MIG(Multi-Instance GPU)为GPU多实例技术,可将单张加速卡切分为多个实例供不同作业使用。

三、服务节点

平台配置服务节点7台,其中登录节点3台、管理节点4台。登录节点为用户提供登录接入、作业提交与编译调试环境;管理节点承担集群资源调度、运行监控与日常运维管理。

四、网络与存储

集群所有节点通过HDR InfiniBand网络互联,为大规模并行计算提供高带宽、低时延的节点间通信通道;存储方面配置一套1.3 PB的高性能并行文件存储系统,满足计算作业对数据读写带宽与并发访问的要求。


copyright@2022长安大学 | 高性能计算平台