硬件资源

计算存储等所有硬件资源详情

服务节点

管理、监控、认证、调度和登录节点均为虚拟机,CPU/RAM/SSD根据需求分配

通讯网络

骨干以太网:2*100Gb

服务网络:100Mb/1Gb Ethernet

管理网络:1/10/25/40/100Gb Ethernet

高速网络:20/40/56/100/200Gb DDR/QDR/FDR/HDR InfiniBand, 100Gb Omni-Path Architecture

计算资源

命名规则和优先级

每组计算节点均对应两个队列;标准队列和优先队列

计算队列

合计

总览

表格

查看详细表格

SSD:

详情

x7542

e52643tgb

e52692v2ib

e52680v3ib

e5v3ib

e5v3k40ib

e52630v4

e52640v4

e52650v4

e52680v4ib

e52682v4opa

e74820v4

e7v4ib

e5v4p100ib

6140ib

6148v100ib

5218

5218q

62v100ib

9242opa

7702ib

722080tiib

72rtxib

5220r

6226rib

6230r

5318h

6330ib

6338

7k83

83a100ib

813080

723080

723090ib

814080

734090d

944090d

734090ib

75434090ib

9654

9754

6458q

cpu1


退出服务

5150
e5620
e5430
x5550ib
e52660
7742
7502
x5650
x5650ib
e5645
e52660tgb
e52660ib
724090

存储资源

合计

总览

表格

查看表格

并行存储

高速全闪(Tier 0)

特点:热数据、高性能、双/单副本

/bbfs

采用全NVMe SSD构建的高性能Burst Buffer,具备极高的顺序和随机读写性能,无快照。

/bbfs/fs*/

所有文件系统(/fs*/)均在此目录中有映射,/bbfs/fs*/ 是 /fs*/ 的高速缓存,在 /bbfs/fs*/ 中重读和写入具有极高的性能,与直接在 /fs*/ 下相比有显著提升,保存在 /bbfs/fs*/ 下的文件会自动回写 /fs*/ 保存。

如:作业输入文件位于 /fsa/home/yaoge/in,如果此输入文件近期会被读取多次(无论是单个作业还是多个作业),则应将输入文件路径指定为 /bbfs/fsa/home/yaoge/in,那么从第二次开始均从高速SSD上读取,减少作业读取文件上花费的时间。

如:作业输出文件如较大,则应将数据文件路径指定为 /bbfs/fsa/home/yaoge/out,那么将直接写入高速SSD中,然后系统会自动将文件回写到 /fsa/home/yaoge/out 便于长期保存,减少作业写入文件上花费的时间。

/bbfs/scratch/

用于保存临时文件,超过30天没有访问(atime)的文件会被自动删除,适合于临时存储计算中间结果、checkpoint等无需长期保留的文件。文件名以 .tmp 和 .temp 结尾的文件保存为单副本(无数据保护)。

如:作业运行过程中保存的Check Point文件或多个作业之间通过临时文件传输数据,这些文件无需长期保存,则可以保存在/bbfs/scratch/yaoge目录下,读写均在高速SSD上。

家目录(Tier 1)

特点:温数据、普通性能、快照

快照

快照是特定时间点数据的只读副本,用户可以从中恢复删除的文件或文件的过往版本。部分家目录文件系统有快照,可以在文件系统目录/.snapshot中查找。

如:/fsa的快照位于/fsa/.snapshots,/fsa/.snapshots/20220804-1800是2022年8月4日18时0分创建的快照,在这个目录下可以查阅快照创建时间点的所有文件。

/fsa

/fs04

/fs08

/fs09

/fs10

/fs12

/fs13

/fs14

支撑目录

/fs00

归档存储(Tier 2)

特点:冷数据、低性能、便宜

/archive

快照

快照是特定时间点数据的只读副本,用户可以从中恢复删除的文件或文件的过往版本,可以在文件系统目录/.zfs/snapshot中查找。

如:/archive的快照位于/archive/.zfs/snapshot,/archive/.zfs/snapshot/20220904-0000是2022年9月4日0时0分创建的快照,在这个目录下可以查阅快照创建时间点的所有文件。

对象存储(Tier 2)

打破壁垒实现集群内外数据的统一访问。同一份数据,集群内外共同使用,访问方式相同,再无迁移数据的烦恼!

s3.nju.edu.cn

临时目录

/tmp/ /var/tmp/

节点本地根文件系统的临时文件目录

/dev/shm/

节点内存中的临时文件系统目录,容量为总内存的一半,重启不保留

/ssd/ /tmp/ssd

部分节点有额外的SSD用于临时存储,则挂载于此目录


退出服务

/fs04
/fs02
/fs06
/fs07
/fs05
/fs05b
/fs03
/fs11
/fs01