# 硬件资源

计算存储等所有硬件资源详情

# 服务节点

管理、监控、认证、调度和登录节点均为虚拟机，CPU/RAM/SSD根据需求分配

- CPU: Intel Xeon Platinum 8358 (32 Cores, 48MB Cache, 2.60 GHz, 11.2 GT/s UPI)
- RAM: 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 204.8 GB/s
- Storage: Huawei OceanStor Dorado 5500 V6 All-Flash Storage (NVMe over RoCE)
- Network: 4\*25 Gigabit Ethernet

# 通讯网络

骨干以太网：2*100Gb

服务网络：100Mb/1Gb Ethernet

管理网络：1/10/25/40/100Gb Ethernet

高速网络：40/56/100/200Gb QDR/FDR/HDR InfiniBand, 100Gb Omni-Path Architecture

# 计算资源

## 命名规则和优先级

每组计算节点均对应两个队列；标准队列和优先队列

- 标准队列（CPU和加速卡型号+网络类型）：所有用户都可以提交作业到这个队列进行计算；
- 优先队列（CPU和加速卡型号+网络类型+!）：
	- 公共设备的优先队列：仅用于测试用途，优先级高于标准队列，但运行时间、作业数量、核数都有限制，没有抢占。
	- 自购设备的优先队列：只允许队列购置者提交作业，优先!队列的作业如果因为资源不足而不能运行，则会抢占标准队列作业的资源，将标准队列的作业挂起（状态SSUSP）或杀掉，腾出资源来运行优先!队列的作业，当作业完成后被挂起的作业会自动恢复执行。被挂起的作业可以用 `brequeue <JOBID>` 命令杀掉并自动重新提交。
- 每组计算节点的所有队列共享同一个 fairshare 数据。如果一个队列中的计算机由不止一个组出资购买，那么每个组在优先!队列运行中作业所能使用的节点限制为出资购买的部分，其它队列则无此限制。
- 组管理员可以来信设定本组所有用户可提交的队列，默认为所有队列均可提交作业。
- 所有公共共享队列共享同一个 fairshare 数据，公共共享队列的作业不会被抢占。

## 计算队列
### 合计
- 节点数量：341
- CPU插槽数：713
- CPU核数：15768
- GPU卡数：191
- GPU CUDA核数：2375808
- 内存：83232 GB
- 显存：4680 GB
- CPU和数据中心GPU双精度浮点计算理论峰值：1049.0776 TFLOPS (CPU: 833.818, GPU: 215.26)
- 消费级GPU单精度浮点计算理论峰值：10170.912 TFLOPS

### 总览
- 双路CPU：e52692v2ib、e52680v3ib、e5v3ib、e52630v4、e52640v4、e52650v4、e52680v4ib、e52682v4opa、5218、7702ib、5220r、6230r、5318h、6330ib、7k83、9654、9754
- 四路CPU：e74820v4、6140ib、5218q、9242opa
- 高主频CPU：e52643tgb、6226rib
- 大内存CPU：e7v4ib、6338、6458q、97554090ib
- 数据中心GPU：e5v3k40ib、e5v4p100ib、6148v100ib、7552v100、62v100ib、83a100ib
- 消费级GPU：722080tiib、72rtxib、813080、723080、723090ib、814080、734090d、944090d、734090ib、75434090ib、97554090ib、945090ib、65305090ib
- CPU融合：cpu1

### 表格
[查看详细表格](https://table.nju.edu.cn/dtable/view-external-links/custom/hpc-compute/)
<iframe className="dtable-embed" src="https://table.nju.edu.cn/apps/custom/hpc-resources" frameBorder="0" width="100%" height="700" style="background: transparent; border: 1px solid #ccc;"></iframe>


SSD：
  - / 表示节点本地根文件系统采用SSD，用户可用 /tmp 和 /var/tmp
  - /ssd 表示节点有额外的SSD用于临时存储，用户可用 /ssd 和 /tmp/ssd
  <!--- cache 表示节点有并行文件系统的本地高速缓存。-->

### 详情

#### e52643tgb

- 双精度浮点计算理论峰值：2.112 TFLOPS
- 购置者：万贤纲100%
- 10\*Dell PowerEdge 12G R620
- Hostname: r001-r010
- CPU: 2\*Intel Xeon E5-2643 (4 Cores, 10MB Cache, 3.30 GHz, 8.00 GT/s QPI)
- RAM: 4 Channels, DDR3-1600 ECC RDIMM, Bandwidth: 102.4 GB/s
  - [r001-r003] 96 GB
  - [r004-r010] 128 GB，`-R largemem` 指定使用
- HDD: 600 GB 2.5in 10Krpm 6Gb/s SAS
- Network: 10 Gigabit Ethernet

#### e52692v2ib
- 双精度浮点计算理论峰值：16.896 TFLOPS
- 购置者：孙建75%，王强华25%
- 40\*Inspur NX5440
- Hostname: i01n01-i01n20 i02n01-i02n20
- CPU: 2\*Intel Xeon E5-2692 v2 (12 Cores, 30MB Cache, 2.20 GHz, 8 GT/s QPI)
- RAM: 64 GB (8x8GB), 4 Channels, DDR3-1866 ECC RDIMM, Bandwidth: 119.4 GB/s
- HDD: 600 GB 2.5in 10Krpm 6Gb/s SAS
- Network: Gigabit Ethernet, 40 Gbit/s QDR InfiniBand

#### e52680v3ib
- 双精度浮点计算理论峰值：24.96 TFLOPS
- 购置者：张海军100%
- 26\*HP BladeSystem ProLiant BL460c Gen9
- Hostname: s03n01-s03n13 s04n01-s04n13
- CPU: 2\*Intel Xeon E5-2680 v3 (12 Cores, 30MB Cache, 2.50 GHz, 9.6 GT/s QPI)
- RAM: 128 GB ([s03n01-s03n13 s04n01-s04n02] 8x16GB | [s04n03-s04n13] 16x8GB), 4 Channels, DDR4-2133 ECC RDIMM, Bandwidth: 136 GB/s
- HDD: 300 GB 2.5in 10Krpm 6Gb/s SAS
- Network: Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### e5v3ib

- 双精度浮点计算理论峰值：72 TFLOPS
- 购置者：公共共享100%
- 70\*Lenovo Flex System x240 M5 5\*Lenovo System x3650 M5
- Hostname: f01n01-f01n14 f02n01-f02n14 f03n01-f03n14 f04n01-f04n14 f05n01-f05n14 x013-x017 x013-x017
- CPU: 2\*Intel Xeon E5-2680 v3 (12 Cores, 30MB Cache, 2.50 GHz, 9.6 GT/s QPI)
- RAM: 4 Channels, [f01n01-f05n14] DDR4-2133 ECC RDIMM, Bandwidth: 136 GB/s | [x013-x017] DDR4-1866 ECC RDIMM, Bandwidth: 119.4 GB/s
  - [f01n01-f05n04] 128 GB (8x16GB)
  - [f05n05-f05n14] 256 GB (8x32GB), `-R mem256g` 或 `-R largemem` 指定使用
  - [x013-x017] 384 GB (24x32GB), `-R mem384g` 或 `-R largemem` 指定使用
- SSD: 2.5in SATA 6Gb/s
  - [f01n01-f05n14] Samsung Enterprise SSD PM863, 32-layer 3D TLC, 120GB 170TBW
  - [x013-x017] Samsung SSD 850 PRO, 32-layer 3D TLC, 512GB
- Network: Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### e5v3k40ib
- 双精度浮点计算理论峰值：3.82 TFLOPS
- 购置者：公共共享100%
- 1\*Lenovo System x3650 M5
- Hostname: x001
- CPU: 2\*Intel Xeon E5-2680 v3 (12 Cores, 30MB Cache, 2.50 GHz, 9.6 GT/s QPI)
- RAM: 128 GB (8x16GB), 4 Channels, DDR4-2133 ECC RDIMM, Bandwidth: 136 GB/s
- GPU: 2\*NVIDIA Tesla K40 (2880 Cores 875MHz, 12GB 384-bit GDDR5 3.0GHz 288GB/s, PCIe3.0 x16)
- HDD: 300 GB 2.5in 10Krpm 6Gb/s SAS
- Network: 10 Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### e52630v4
- 双精度浮点计算理论峰值：1.408 TFLOPS
- 购置者：邵陆兵100%（邢定钰组）
- 2\*Inspur NX5460M4
- Hostname: i04n01-i04n02
- CPU: 2\*Intel Xeon E5-2630 v4 (10 Cores, 25MB Cache, 2.20 GHz, 8 GT/s QPI)
- RAM: 64 GB (4x16GB), 2 Channels, DDR4-2133 ECC RDIMM, Bandwidth: 68.3 GB/s
- HDD: 2\*300 GB 2.5in 10Krpm 12Gb/s SAS RAID1
- Network: 10 Gigabit Ethernet

#### e52640v4

- 双精度浮点计算理论峰值：0.768 TFLOPS
- 购置者：李建新100%
- 1\*Inspur NF5280M4
- Hostname: n001
- CPU: 2\*Intel Xeon E5-2640 v4 (10 Cores, 25MB Cache, 2.40 GHz, 8 GT/s QPI)
- RAM: 128 GB (8x16GB), 4 Channels, DDR4-2133 ECC RDIMM, Bandwidth: 136.6 GB/s
- HDD: 2\*600 GB 2.5in 10Krpm 12Gb/s SAS RAID1
- Network: Gigabit Ethernet

#### e52650v4

- 双精度浮点计算理论峰值：2.5344 TFLOPS
- 购置者：盛利100%
- 3\*Inspur NF5270M4
- Hostname: n003-n005
- CPU: 2\*Intel Xeon E5-2650 v4 (12 Cores, 30MB Cache, 2.20 GHz, 9.6 GT/s QPI)
- RAM: 128 GB (8x16GB), 4 Channels, DDR4-2400 ECC RDIMM, Bandwidth: 153.6 GB/s
- HDD: [n003-n004] 4\*300 GB 2.5in 10Krpm 12Gb/s SAS RAID5 | [n005] 3\*300 GB 2.5in 10Krpm 12Gb/s SAS RAID5
- Network: Gigabit Ethernet

#### e52680v4ib

- 双精度浮点计算理论峰值：20.4288 TFLOPS
- 购置者：王炜84.21%，法伟15.79%
- 19\*HPE BladeSystem ProLiant BL460c Gen9
- Hostname: s04n14-s04n16 s05n01-s05n16
- CPU: 2\*Intel Xeon E5-2680 v4 (14 Cores, 35MB Cache, 2.40 GHz, 9.6 GT/s QPI)
- RAM: 128 GB (8x16GB), 4 Channels, DDR4-2400 ECC RDIMM, Bandwidth: 153.6 GB/s
- SSD: Samsung Enterprise SSD PM863, 32-layer 3D TLC, 120GB 170TBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### e52682v4opa

- 双精度浮点计算理论峰值：25.6 TFLOPS
- 购置者：万贤纲100%
- 20\*Inspur NX5440M4
- Hostname: i03n01-i03n20
- CPU: 2\*Intel Xeon E5-2682 v4 (16 Cores, 40MB Cache, 2.50 GHz, 9.6 GT/s QPI)
- RAM: 64 GB (8x8GB), 4 Channels, DDR4-2400 ECC RDIMM, Bandwidth: 153.6 GB/s
- SSD: Intel SSD DC S3500, 20nm MLC, 240GB 140TBW
- SSD: 2.5in SATA 6Gb/s, [i03n01-i03n10] Samsung Enterprise SSD PM863, 32-layer 3D TLC, 960GB 1400TBW | [i03n11-i03n20] Intel SSD DC S3610, 20nm MLC, 800GB 5.3PBW
  - SSD mounted at /ssd & /tmp/ssd
- Network: Gigabit Ethernet, 100 Gbit/s Omni-Path Architecture


#### e7v4ib

- 双精度浮点计算理论峰值：2.1504 TFLOPS
- 购置者：公共共享100%
- 1\*Dell PowerEdge R930
- Hostname: r011
- CPU: 4\*Intel Xeon E7-4850 v4 (16 Cores, 40MB Cache, 2.10 GHz, 8 GT/s QPI)
- RAM: 1024 GB (32x32GB), 4 Channels, DDR4-1333 ECC RDIMM
- SSD: 2\*Intel SSD DC S3610, 20nm MLC, 200GB 1.1PBW, 2.5in SATA 6Gb/s RAID1
- Network: 10 Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### e5v4p100ib

- 双精度浮点计算理论峰值：10.296 TFLOPS
- 购置者：公共共享100%
- 1\*Lenovo System x3650 M5
- Hostname: x002
- CPU: 2\*Intel Xeon E5-2660 v4 (14 Cores, 35MB Cache, 2.00 GHz, 9.6 GT/s QPI)
- RAM: 128 GB (8x16GB), 4 Channels, DDR4-2400 ECC RDIMM, Bandwidth: 153.6 GB/s
- GPU: 2\*NVIDIA Tesla P100 PCIe 16GB (3584 Cores 1328MHz, 16GB 715MHz 4096-bit HBM2 732 GB/s, PCIe3.0 x16)
- HDD: 300 GB 2.5in 10Krpm 6Gb/s SAS
- Network: Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### 6140ib

- 双精度浮点计算理论峰值：84.7872 TFLOPS
- 购置者：公共共享100%
- 16\*H3C B7800 G3
- Hostname: b01n01-b01n08 b02n01-b02n08
- CPU: 4\*Intel Xeon Gold 6140 (18 Cores, 24.75MB Cache, 2.30 GHz)
- RAM: 384 GB (24x16GB), 6 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 511.2 GB/s
- SSD: Micron 5100, TLC, 240GB, M.2 2280, SATA 6Gb/s
- Network: 10 Gigabit Ethernet, 100 Gbit/s EDR InfiniBand

#### 6148v100ib

- 双精度浮点计算理论峰值：10.072 TFLOPS
- 购置者：赵宇心100%
- 1\*Lenovo ThinkSystem SR650
- Hostname: x003
- CPU: 2\*Intel Xeon Gold 6148 (20 Cores, 27.5MB Cache, 2.40 GHz)
- RAM: 192 GB (12x16GB), 6 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 255.6 GB/s
- GPU: NVIDIA Tesla V100 PCIe 16GB (5120 CUDA Cores 1380MHz, 16GB HBM2 877MHz 4096-bit 900GB/s, PCIe3.0 x16)
- SSD: LITEON, 128GB, M.2 2280, SATA 6Gb/s
- Network: Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

#### 5218

- 双精度浮点计算理论峰值：1.1776 TFLOPS
- 提供者：CPU/准系统 Intel、内存 本中心
- 1\*Intel S2600WFT
- Hostname: o003
- CPU: 2\*Intel Xeon Gold 5218 (16 Cores, 22MB Cache, 2.30 GHz)
- RAM: 192 GB (12x16GB), 6 Channels, DDR4-2666 ECC RDIMM
- SSD: Intel SSD DC S3500, 20nm MLC, 275TBW 480GB, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet

#### 5218q

- 双精度浮点计算理论峰值：2.3552 TFLOPS
- 购置者：李建新100%
- 1\*Inspur NF8480M5
- Hostname: n032
- CPU: 4\*Intel Xeon Gold 5218 (16 Cores, 22MB Cache, 2.30 GHz)
- RAM: 256 GB (8x32GB), 4 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 170.7 GB/s
- HDD: 2\*600 GB 2.5in 10Krpm 12Gb/s SAS RAID1
- Network: Gigabit Ethernet

#### 7552v100

- 双精度浮点计算理论峰值：59.3792 TFLOPS
- 购置者：卢毅100%
- 1\*Tongtaiyi TG659V2
- Hostname: o004
- CPU: 2\*AMD EPYC 7552 (48 Cores, 192MB Cache, 2.2 GHz)
- RAM: 512 GB (16x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- GPU: 8\*NVIDIA Tesla V100 PCIe 32GB (5120 CUDA Cores 1380MHz, 32GB HBM2 877MHz 4096-bit 900GB/s, PCIe3.0 x16)
- SSD: Samsung PM883, TLC 3D NAND, 960GB 1366TBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet

#### 62v100ib

- 双精度浮点计算理论峰值：65.6 TFLOPS
- 购置者：公共共享100%
- 1\*Inspur NF5468M5-S
- Hostname: n002
- CPU: 2\*Intel Xeon Gold 6248 (20 Cores, 27.5MB Cache, 2.50 GHz)
- RAM: 768 GB (24x32GB), 6 Channels, DDR4-2933 ECC RDIMM, Bandwidth: 281.6 GB/s
- GPU: 8\*NVIDIA Tesla V100 SXM2 32GB (5120 CUDA Cores 1530MHz, 32GB HBM2 877MHz 4096-bit 900GB/s, NVLink 300GB/s, PCIe3.0 x16)
- SSD: 2\*Samsung Enterprise SSD PM883, TLC 3D NAND, 480GB 683TBW, 2.5in SATA 6Gb/s, RAID1
- SSD: 2\*Intel SSD DC P4510, 64-Layer TLC 3D NAND, 2TB 2.61PBW, U.2 15mm, PCIe3.1 x4 NVMe, RAID0
  - SSD mounted at /ssd & /tmp/ssd
- Network: 10 Gigabit Ethernet, 100 Gbit/s EDR InfiniBand

#### 9242opa

- 双精度浮点计算理论峰值：141.312 TFLOPS
- 购置者：孙建100%
- 20\*Intel S9248WK2HAC
- Hostname: s001-s020
- CPU: 2\*Intel Xeon Platinum 9242 (48 Cores, 71.5MB Cache, 2.30 GHz)
- RAM: 384 GB (24x16GB), 12 Channels, DDR4-2933 ECC RDIMM, Bandwidth: 563.2 GB/s
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 480GB 1.2PBW, M.2 2280, SATA 6Gb/s
- Network: Gigabit Ethernet, 100 Gbit/s Omni-Path Architecture

#### 7702ib

- 双精度浮点计算理论峰值：57.344 TFLOPS
- 购置者：公共共享100%
- 14\*Asus RS720A-E9-RS24V2
- Hostname: a001-a014
- CPU: 2\*AMD EPYC 7702 (64 Cores, 256MB Cache, 2.0 GHz)
- RAM: 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
  - [a001-a010] 256 GB (16x16GB)
  - [a011-a014] 512 GB (32x16GB), `-R largemem` 指定使用
- SSD: Samsung SSD 970 EVO Plus, V-NAND 3-bit MLC, 250GB 150TBW, M.2 2280, PCIe3.0 x4 NVMe 1.3
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 722080tiib

- CPU双精度浮点计算理论峰值：3.072 TFLOPS
- GPU单精度浮点计算理论峰值：215.168 TFLOPS
- 购置者：公共共享100%
- 4\*Gigabyte G242-Z10
- Hostname: g001-g004
- CPU: 1\*AMD EPYC 7302 (16 Cores, 128MB Cache, 3.0 GHz)
- GPU: 4\*NVIDIA GeForce RTX 2080 Ti 11GB (4352 CUDA Cores 1545MHz, 11GB GDDR6 7000MHz 352-bit 616 GB/s, PCIe3.0 x16)
- RAM: 256 GB (8x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 204.8 GB/s
- SSD: Intel SSD DC S4600, 3D NAND TLC, 240GB 1.40PBW, 2.5in SATA 6Gb/s
- SSD: Intel SSD DC P4510, 64-Layer TLC 3D NAND, 2TB 2.61PBW, U.2 15mm, PCIe3.1 x4 NVMe
  - SSD mounted at /ssd & /tmp/ssd
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 72rtxib

- CPU双精度浮点计算理论峰值：2.304 TFLOPS
- GPU单精度浮点计算理论峰值：195.744 TFLOPS
- 购置者：公共共享100%
- 3\*Gigabyte G242-Z10
- Hostname: g005-g007
- CPU: 1\*AMD EPYC 7302 (16 Cores, 128MB Cache, 3.0 GHz)
- GPU: 4\*NVIDIA TITAN RTX 24GB (4608 CUDA Cores 1770MHz, 24GB GDDR6 7000MHz 384-bit 672 GB/s, PCIe3.0 x16)
- RAM: 256 GB (8x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 204.8 GB/s
- SSD: Intel SSD DC S4600, 3D NAND TLC, 240GB 1.40PBW, 2.5in SATA 6Gb/s
- SSD: Intel SSD DC P4510, 64-Layer TLC 3D NAND, 2TB 2.61PBW, U.2 15mm, PCIe3.1 x4 NVMe
  - SSD mounted at /ssd & /tmp/ssd
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 5220r

- 双精度浮点计算理论峰值：5.0688 TFLOPS
- 购置者：盛利100%
- 3\*Inspur NF5280M5
- Hostname: n006-n008
- CPU: 2\*Intel Xeon Gold 5220R (24 Cores, 35.75MB Cache, 2.20 GHz)
- RAM: 192 GB (6x32GB), 3 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 127.8 GB/s
- SSD: 2\*Intel SSD DC S4500, 3D NAND TLC, 480GB 0.90PBW, 2.5in SATA 6Gb/s, RAID1
- Network: Gigabit Ethernet

#### 6226rib

- 双精度浮点计算理论峰值：65.3312 TFLOPS
- 购置者：万贤纲100%
- 22\*Huawei FusionServer Pro 1288H V5
- Hostname: f001-f022
- CPU: 2\*Intel Xeon Gold 6226R (16 Cores, 22MB Cache, 2.90 GHz)
- RAM: 192 GB (12x16GB), 6 Channels, DDR4-2933 ECC RDIMM, Bandwidth: 281.6 GB/s
- SSD: Huawei ES3610C V5, 3D TLC, 1.6TB 8.76PBW, HHHL, PCIe3.0 x4 NVMe 1.3
- Network: Gigabit Ethernet, 100 Gbit/s EDR InfiniBand

#### 6230r

- 双精度浮点计算理论峰值：10.4832 TFLOPS
- 购置者：盛利100%
- 3\*Inspur NF5280M5
- Hostname: n009-n011
- CPU: 2\*Intel Xeon Gold 6230R (26 Cores, 35.75MB Cache, 2.10 GHz)
- RAM: 192 GB (6x32GB), 3 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 127.8 GB/s
- SSD: 2\*Samsung PM883, TLC 3D NAND, 480GB 683TBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet

#### 5318h

- 双精度浮点计算理论峰值：5.76 TFLOPS
- 购置者：李建新100%
- 1\*Inspur NF8480M6
- Hostname: n035
- CPU: 4\*Intel Xeon Gold 5318H (18 Cores, 24.75MB Cache, 2.50 GHz)
- RAM: 512 GB (16x32GB), 4 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 170.7 GB/s
- HDD: 2\*Samsung PM893, V-NAND TLC, 960GB 1752TBW, 2.5in SATA 6Gb/s, RAID1
- Network: Gigabit Ethernet

#### 6330ib

- 双精度浮点计算理论峰值：57.344 TFLOPS
- 购置者：公共共享100%
- 16\*Inspur NF5180M6
- Hostname: n016-n031
- CPU: 2\*Intel Xeon Gold 6330 (28 Cores, 42MB Cache, 2.00 GHz)
- RAM: 256 GB (16x16GB), 8 Channels, DDR4-2933 ECC RDIMM, Bandwidth: 375.5 GB/s
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 240GB 0.9PBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 6338

- 双精度浮点计算理论峰值：16.384 TFLOPS
- 购置者：卢毅100%
- 4\*Inspur NF5180M6
- Hostname: n012-n015
- CPU: 2\*Intel Xeon Gold 6338 (32 Cores, 48MB Cache, 2.00 GHz)
- RAM: 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
  - [n012 n013] 1024 GB (32x32GB)
  - [n014 n015] 2048 GB (32x64GB), `-R largemem` 指定使用
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 240GB 0.9PBW, 2.5in SATA 6Gb/s
- Network: 10 Gigabit Ethernet

#### 7k83
- 双精度浮点计算理论峰值： 15.6672 TFLOPS
- 购置者：雷群利100%
- 2\*Gigabyte R182-Z90 1\*Asus RS700A-E11-RS4U
- Hostname: g008-g009 a016
- CPU: 2\*AMD EPYC 7K83 (64 Cores, 256MB Cache, 2.55 GHz)
- RAM: 256 GB (16x16GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 480GB 1.2PBW, 2.5in SATA 6Gb/s
- Network: 10 Gigabit Ethernet

#### 83a100ib

- 双精度浮点计算理论峰值：82.9248 TFLOPS
- 购置者：公共共享100%
- 1\*Supermicro SYS-420GP-TNAR+ (Powerleader PR4908WV)
- Hostname: m001
- CPU: 2\*Intel Xeon Platinum 8358 (32 Cores, 48MB Cache, 2.60 GHz)
- RAM: 512 GB (16x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- GPU: 8\*NVIDIA A100 SXM4 40GB (6912 CUDA Cores 1410MHz, 40GB HBM2 1215MHz 5120-bit 1555GB/s, NVLink 600GB/s, PCIe4.0 x16)
- SSD: Samsung 983 DCT, V-NAND 3-bit MLC, 960GB 1.366PBW, M.2 22110, PCIe3.0 x4 NVMe 1.2b
- SSD: 2\*Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 3.84TB 7.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4, RAID0
  - SSD mounted at /ssd & /tmp/ssd
- Network: 10 Gigabit Ethernet, 200 Gbit/s HDR InfiniBand

#### 813080

- CPU双精度浮点计算理论峰值：7.9872 TFLOPS
- GPU单精度浮点计算理论峰值：476.32 TFLOPS
- 购置者：雷群利100%
- 1\*Supermicro SYS-4029GP-TRT 1\*Asus ESC8000 G4
- Hostname: m004 a018
- CPU: [m004] 2\*Xeon Platinum 8163 (24 Cores, 33MB Cache, 2.50 GHz) | [a018] 2\*Xeon Platinum 8168 (24 Cores, 33MB Cache, 2.70 GHz)
- RAM: [m004] 64 GB (4x16GB), 2 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 85.3 GB/s | [a018] 128 GB (8x16GB), 4 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 170.7 GB/s
- GPU: 8\*NVIDIA GeForce RTX 3080 10GB (8704 CUDA Cores 2100MHz, 10GB GDDR6X 9501MHz 320-bit 760.3 GB/s, PCIe3.0 x16)
- SSD: [m004] Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 480GB 1.2PBW, 2.5in SATA 6Gb/s | [a018] Intel SSD D3-S4610, 64-Layer TLC 3D NAND, 240GB 1.4PBW, 2.5in SATA 6Gb/s 
- Network: Gigabit Ethernet

#### 723080

- CPU双精度浮点计算理论峰值：4.608 TFLOPS
- GPU单精度浮点计算理论峰值：238.16 TFLOPS
- 购置者：雷群利100%
- 1\*Asus ESC8000A-E11
- Hostname: a015
- CPU: 2\*AMD EPYC 7B12 (64 Cores, 256MB Cache, 2.25 GHz)
- RAM: 128 GB (16x8GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- GPU: 8\*NVIDIA GeForce RTX 3080 10GB (8704 CUDA Cores 2100MHz, 10GB GDDR6X 9501MHz 320-bit 760.3 GB/s, PCIe4.0 x16)
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 240GB 0.9PBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet

#### 723090ib

- CPU双精度浮点计算理论峰值：4.3008 TFLOPS
- GPU单精度浮点计算理论峰值：569.28 TFLOPS
- 购置者：公共共享100%
- 2\*Supermicro AS -4124GS-TNR (Roycom)
- Hostname: m002-m003
- CPU: 2\*AMD EPYC 7402 (24 Cores, 128MB Cache, 2.8 GHz)
- RAM: 512 GB (16x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- GPU: 8\*NVIDIA GeForce RTX 3090 24GB (10496 CUDA Cores 2100MHz, 24GB GDDR6X 9751MHz 384-bit 936.2 GB/s, PCIe4.0 x16)
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 480GB 1.2PBW, 2.5in SATA 6Gb/s
- SSD: 2\*Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 3.84TB 7.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4, RAID0
  - SSD mounted at /ssd & /tmp/ssd
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 814080

- CPU双精度浮点计算理论峰值：4.1472 TFLOPS
- GPU单精度浮点计算理论峰值：194.960 TFLOPS
- 购置者：雷群利100%
- 1\*Supermicro X11DPG-QT
- Hostname: m009
- CPU: 2\*Xeon Platinum 8168 (24 Cores, 33MB Cache, 2.70 GHz)
- RAM: 64 GB (4x16GB), 2 Channels, DDR4-2666 ECC RDIMM, Bandwidth: 85.3 GB/s 
- GPU: 4\*NVIDIA GeForce RTX 4080 16GB (9728 CUDA Cores 3105MHz, 16GB GDDR6X 11201MHz 256-bit 716.8 GB/s, PCIe4.0 x16)
- SSD: Samsung PM883, TLC 3D NAND, 240GB 341TBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet

#### 734090d

- CPU双精度浮点计算理论峰值：5.7344 TFLOPS
- GPU单精度浮点计算理论峰值：588.32 TFLOPS
- 购置者：王炜100%
- 1\*Inspur NF5468A5
- Hostname: n034
- CPU: 2\*AMD EPYC 7543 (32 Cores, 256MB Cache, 2.8 GHz)
- RAM: 768 GB (24x32GB) DDR4-2933 ECC RDIMM
- GPU: 8\*NVIDIA GeForce RTX 4090 D 24GB (14592 CUDA Cores 3105MHz, 24GB GDDR6X 10501MHz 384-bit 1008 GB/s, PCIe4.0 x16)
- SSD: Intel SSD D5-P5530, 128-Layer TLC NAND, 960GB 1.7PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.3c
- SSD: 2\*SAMSUNG PM983a, 7.68TB 10.9PBW, U.2 7mm, PCIe3.0 x4, NVMe 1.3c
  - SSD mounted at /ssd1 & /ssd2
- Network: Gigabit Ethernet

#### 944090d

- CPU双精度浮点计算理论峰值：7.3728 TFLOPS
- GPU单精度浮点计算理论峰值：441.24 TFLOPS
- 购置者：王炜100%
- 1\*Inspur NF5468A7
- Hostname: n033
- CPU: 2\*AMD EPYC 9654 (96 Cores, 384MB Cache, 2.4 GHz)
- RAM: 768 GB (24x32GB) 12 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 921.6 GB/s
- GPU: 6\*NVIDIA GeForce RTX 4090 D 24GB (14592 CUDA Cores 3105MHz, 24GB GDDR6X 10501MHz 384-bit 1008 GB/s, PCIe4.0 x16)
- SSD: SSD 960GB
- SSD: 2\*SAMSUNG PM983a, 7.68TB 10.9PBW, U.2 7mm, PCIe3.0 x4, NVMe 1.3c
  - SSD mounted at /ssd1 & /ssd2
- Network: Gigabit Ethernet

#### 734090ib

- CPU双精度浮点计算理论峰值：5.7344 TFLOPS
- GPU单精度浮点计算理论峰值：1321.28 TFLOPS
- 购置者：公共共享100%
- 2\*Supermicro AS -4124GS-TNR (Wuzhou S748E4)
- Hostname: m005-m006
- CPU: 2\*AMD EPYC 7543 (32 Cores, 256MB Cache, 2.8 GHz)
- RAM: 512 GB (16x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- GPU: 8\*NVIDIA GeForce RTX 4090 24GB (16384 CUDA Cores 3105MHz, 24GB GDDR6X 10501MHz 384-bit 1008 GB/s, PCIe4.0 x16)
- SSD: Samsung PM883, TLC 3D NAND, 480GB 683TBW, 2.5in SATA 6Gb/s
- SSD: 2\*Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 3.84TB 7.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4, RAID0
  - SSD mounted at /ssd & /tmp/ssd
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 75434090ib

- CPU双精度浮点计算理论峰值：5.7344 TFLOPS
- GPU单精度浮点计算理论峰值：1321.28 TFLOPS
- 购置者：孙建100%
- 2\*Supermicro AS -4124GS-TNR (Wuzhou S748E4 | Roycom)
- Hostname: m007-m008
- CPU: 2\*AMD EPYC 7543 (32 Cores, 256MB Cache, 2.8 GHz)
- RAM: 512 GB (16x32GB), 8 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 409.6 GB/s
- GPU: 8\*NVIDIA GeForce RTX 4090 24GB (16384 CUDA Cores 3105MHz, 24GB GDDR6X 10501MHz 384-bit 1008 GB/s, PCIe4.0 x16)
- SSD: Samsung PM883, TLC 3D NAND, 480GB 683TBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 9654
- 双精度浮点计算理论峰值：7.3728 TFLOPS
- 购置者：雷群利100%
- 1\*Asus RS720A-E12-RS12
- Hostname: a017
- CPU: 2\*AMD EPYC 9654 (96 Cores, 384MB Cache, 2.4 GHz)
- RAM: 384 GB (24x16GB), 12 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 921.6 GB/s
- SSD: Intel SSD D3-S4510, 64-Layer TLC 3D NAND, 480GB 1.2PBW, 2.5in SATA 6Gb/s
- Network: 10 Gigabit Ethernet

#### 9754
- 双精度浮点计算理论峰值：9.216 TFLOPS
- 购置者：雷群利100%
- 1\*Inventec K885G6
- Hostname: v001
- CPU: 2\*AMD EPYC 9754 (128 Cores, 256MB Cache, 2.25 GHz)
- RAM: 384 GB (24x16GB), 12 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 921.6 GB/s
- SSD: Intel SSD D5-P5530, 128-Layer TLC NAND, 960GB 1.7PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.3c
- Network: 1 Gigabit Ethernet
  
#### 6458q

- 双精度浮点计算理论峰值：25.3952 TFLOPS
- 购置者：卢毅100%
- 4\*Nettrix R620 G50
- Hostname: u001-u004
- CPU: 2\*Intel Xeon Gold 6458Q (32 Cores, 60MB Cache, 3.10 GHz)
- RAM: 1024 GB (16x64GB), 8 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 614.4 GB/s
- SSD: Samsung PM883, TLC 3D NAND, 480GB 683TBW, 2.5in SATA 6Gb/s, RAID1
- Network: 10 Gigabit Ethernet

#### 97554090ib

- CPU双精度浮点计算理论峰值：66.3552 TFLOPS
- GPU单精度浮点计算理论峰值：165.16 TFLOPS
- 购置者：王锐100%
- 3\*Tongtaiyi TU629V3 (Sitonholy AW2245-2GR)
- Hostname: t002-t004
- CPU: 2\*AMD EPYC 9755 (128 Cores, 512MB Cache, 2.7 GHz)
- RAM: 12 Channels, DDR5-6400 ECC RDIMM, Bandwidth: 1228 GB/s
  -  [t002] 2304 GB (24x96GB), `-R largemem` 指定使用
  -  [t003-t004] 1536 GB (24x64GB)
- GPU: [t003-t004] 1\*NVIDIA GeForce RTX 4090 24GB (16384 CUDA Cores 3105MHz, 24GB GDDR6X 10501MHz 384-bit 1008 GB/s, PCIe4.0 x16)
- SSD: GSAITECH, 960GB, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 945090ib
- CPU双精度浮点计算理论峰值： 12.672 TFLOPS
- GPU单精度浮点计算理论峰值： 2515.2 TFLOPS
- 购置者：公共共享100%
- 3\*Enginetech EG8621A4
- Hostname: e001-e003
- CPU: 2\*AMD EPYC 9454 (48 Cores, 256MB Cache, 2.75 GHz)
- RAM: 768 GB (24x32GB), 12 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 921.6 GB/s
- GPU: 8\*NVIDIA GeForce RTX 5090 32GB (21760 CUDA Cores 3090MHz, 32GB GDDR7 14001MHz 512-bit 1792 GB/s, PCIe5.0 x16)
- SSD: Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 7.68TB 14.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 65305090ib
- CPU双精度浮点计算理论峰值： 8.6016 TFLOPS
- GPU单精度浮点计算理论峰值： 1676.8 TFLOPS
- 购置者：孙建100%
- 2\*Enginetech EG8621G4
- Hostname: e004-e005
- CPU: 2\*Intel Xeon Gold 6530 (32 Cores, 160MB Cache, 2.1 GHz)
- RAM: 512 GB (16x32GB), 8 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 614.4 GB/s
- GPU: 8\*NVIDIA GeForce RTX 5090 32GB (21760 CUDA Cores 3090MHz, 32GB GDDR7 14001MHz 512-bit 1792 GB/s, PCIe5.0 x16)
- SSD: Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 7.68TB 14.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### 9654p6000ib
- CPU双精度浮点计算理论峰值： 7.3728 TFLOPS
- GPU单精度浮点计算理论峰值： 252 TFLOPS
- 购置者：王炜100%
- 1\*Enginetech EG8621A4
- Hostname: e006
- CPU: 2\*AMD EPYC 9654 (96 Cores, 384MB Cache, 2.4 GHz)
- RAM: 256 GB (4x64GB), 2 Channels, DDR5-4800 ECC RDIMM, Bandwidth: 153.6 GB/s
- GPU: 2\*NVIDIA GeForce RTX PRO 6000 96GB (24064 CUDA Cores 2430MHz, 96GB GDDR7-ECC 12481MHz 512-bit 1597 GB/s, PCIe5.0 x16)
- SSD: Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 7.68TB 14.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4
- Network: Gigabit Ethernet, 100 Gbit/s HDR100 InfiniBand

#### cpu1

- 作业≤24 cores 单节点运行于公共共享的CPU队列 e5v3ib 6140ib 7702ib 6330ib 中的任意节点，但优先级小于这些队列
<!--
-----

### 退出服务

##### 5150

- 双精度浮点计算理论峰值：1.788 TFLOPS
- 42\*IBM BladeCenter HS21
- Hostname: c01n01-c04n14
- CPU: 2\*Intel Xeon 5150 (2 Cores, 4M Cache, 2.66 GHz, 1333 MHz FSB)
- RAM: 16GB / 8GB / 4GB
- Network: Gigabit Ethernet

##### e5620

- 双精度浮点计算理论峰值：0.076.8 TFLOPS
- 1\*IBM BladeCenter HS22
- Hostname: c01n14
- CPU: 2\*Intel Xeon E5620 (4 Cores, 12M Cache, 2.40 GHz, 5.86 GT/s QPI)
- RAM: 48 GB
- Network: Gigabit Ethernet

##### e5430

- 双精度浮点计算理论峰值：2.383 TFLOPS
- 购置者：刘俊明50%，万贤纲50%
- 28\*HP BladeSystem ProLiant BL260c G5
- Hostname: s01n01-s01n14 s02n01-s02n14
- CPU: 2\*Intel Xeon E5430 (4 Cores, 12M Cache, 2.66 GHz, 1333 MHz FSB)
- RAM: 16 GB
- HDD: 146 GB 2.5in 10Krpm 3Gb/s SAS
- Network: Gigabit Ethernet

##### x5550ib

- 双精度浮点计算理论峰值：23.8336 TFLOPS
- 购置者：公共共享100%
- 280\*IBM BladeCenter HS22
- Hostname: c08n01-c08n14 c09n01-c09n14 c10n01-c10n14 ... c27n01-c27n14
- CPU: 2\*Intel Xeon X5550 (4 Cores, 8M Cache, 2.66 GHz, 6.40 GT/s QPI)
- RAM: 48 GB(c17,c18)/24 GB(c15,c16,c19,c20,c21)/12 GB, 3 Channels, DDR3-1333 ECC RDIMM, Bandwidth: 64 GB/s
- HDD: 146 GB 2.5in 10Krpm 6Gb/s SAS
- Network: Gigabit Ethernet, 20 Gbit/s DDR InfiniBand
- -R largemem 指定使用大内存(24G/48G)节点(c15,c16,c17,c18,c19,c20,c21)
- -R mem24g 指定使用24GB内存节点(c15n01-c15n14,c16n01-c16n14,c19n01-c19n14,c20n01-c20n14,c21n01-c21n14)
- -R mem48g 指定使用48GB内存节点(c17n01-c17n14,c18n01-c18n14)

##### e52660
- 双精度浮点计算理论峰值：2.253 TFLOPS
- 购置者：公共共享100%（原董锦明100%）
- 8\*中科曙光TC4600
- Hostname: t01n01-t01n08
- CPU: 2\*Intel Xeon E5-2660 (8 Cores, 20M Cache, 2.20 GHz, 8.00 GT/s QPI)
- RAM: 32 GB, 4 Channels, DDR3-1600 ECC RDIMM, Bandwidth: 102.4 GB/s
- HDD: 300 GB 2.5in 10Krpm 6Gb/s SAS
- Network: Gigabit Ethernet

##### 7742

- 提供者：AMD
- 1\*QCT QuantaGrid D52BQ-2U
- Hostname: o001
- CPU: 2\*AMD EPYC 7742 (64 Cores, 256MB Cache, 2.25 GHz)
- RAM: 256 GB, 8 Channels, DDR4-2666 ECC RDIMM
- SSD: Micron 1100 3D TLC 256GB 2.5in 6Gb/s SATA
- Network: 10 Gigabit Ethernet

##### 7502

- 提供者：CPU: AMD、系统: 奥工
- 1\*Asus RS720A-E9-RS24V2
- Hostname: o002
- CPU: 2\*AMD EPYC 7502 (32 Cores, 128MB Cache, 2.5 GHz)
- RAM: 256 GB, 8 Channels, DDR4-2933 ECC RDIMM
- SSD: Samsung SSD 970 PRO 512GB M.2 NVMe
- Network: Gigabit Ethernet

##### x5650
- 双精度浮点计算理论峰值：3.57504 TFLOPS
- 购置者：公共共享100%（原邢定钰50%，舒大军50%）
- 28\*IBM BladeCenter HS22
- Hostname: c06n01-c06n14 c07n01-c07n14
- CPU: 2\*Intel Xeon X5650 (6 Cores, 12MB Cache, 2.66 GHz, 6.40 GT/s QPI)
- RAM: 48 GB, 3 Channels, DDR3-1333 ECC RDIMM, Bandwidth: 64 GB/s
- HDD: 146 GB 2.5in 10Krpm 3Gb/s SAS
- Network: Gigabit Ethernet, iWARP 10 Gigabit Ethernet

##### x5650ib
- 双精度浮点计算理论峰值：35.7504 TFLOPS
- 购置者：公共共享100%
- 280\*IBM BladeCenter HS22
- Hostname: c08n01-c08n14 c09n01-c09n14 c10n01-c10n14 ... c27n01-c27n14
- CPU: 2\*Intel Xeon X5650 (6 Cores, 12MB Cache, 2.66 GHz, 6.40 GT/s QPI)
- RAM: 48 GB(c17,c18)/24 GB(c15,c16,c19,c20,c21)/12 GB, 3 Channels, DDR3-1333 ECC RDIMM, Bandwidth: 64 GB/s
  - -R largemem 指定使用大内存(24G/48G)节点(c15,c16,c17,c18,c19,c20,c21)
  - -R mem24g 指定使用24GB内存节点(c15,c16,c19,c20,c21)
  - -R mem48g 指定使用48GB内存节点(c17,c18)
- HDD: 146 GB 2.5in 10Krpm 3Gb/s SAS
- Network: Gigabit Ethernet, 20 Gbit/s DDR InfiniBand

##### e5645
- 双精度浮点计算理论峰值：0.4608 TFLOPS
- 购置者：马余强100%
- 4\*IBM System x3650 M3
- Hostname: x004-x007
- CPU: 2\*Intel Xeon E5645 (6 Cores, 12MB Cache, 2.40 GHz, 5.86 GT/s QPI)
- RAM: 16 GB, 2 Channels, DDR3-1333 ECC RDIMM, Bandwidth: 42.6 GB/s
- HDD: 4\*300 GB 2.5in 10Krpm 6Gb/s SAS RAID5
- Network: Gigabit Ethernet

##### e52660tgb

- 双精度浮点计算理论峰值：4.506 TFLOPS
- 购置者：万贤纲100%
- 16\*Dell PowerEdge 12G M620
- Hostname: m02n01-m02n16
- CPU: 2\*Intel Xeon E5-2660 (8 Cores, 20MB Cache, 2.20 GHz, 8.00 GT/s QPI)
- RAM: 32 GB (8x4GB), 4 Channels, DDR3-1600 ECC RDIMM, Bandwidth: 102.4 GB/s
- HDD: 600 GB 2.5in 10Krpm 6Gb/s SAS
- SSD: Intel SSD 730, 20nm MLC, 480GB 128TBW, 2.5in SATA 6Gb/s
  - SSD mounted at /ssd & /tmp/ssd
- Network: 10 Gigabit Ethernet

##### e52660ib

- 双精度浮点计算理论峰值：3.379 TFLOPS
- 购置者：王炜100%
- 12\*Dell PowerEdge 12G M620
- Hostname: m03n01-m03n12
- CPU: 2\*Intel Xeon E5-2660 (8 Cores, 20MB Cache, 2.20 GHz, 8.00 GT/s QPI)
- RAM: 32 GB (8x4GB), 4 Channels, DDR3-1600 ECC RDIMM, Bandwidth: 102.4 GB/s
- HDD: 600 GB 2.5in 10Krpm 6Gb/s SAS (m03n01-m03n06) / 300 GB 2.5in 10Krpm 6Gb/s SAS (m03n07-m03n12)
- Network: Gigabit Ethernet, 56 Gbit/s FDR InfiniBand

##### 724090

- CPU双精度浮点计算理论峰值：3.994 TFLOPS
- GPU单精度浮点计算理论峰值：660.640 TFLOPS
- 购置者：卢晶100%
- 1\*Asus ESC8000A-E11
- Hostname: a019
- CPU: 2\*AMD EPYC 7K62 (48 Cores, 192MB Cache, 2.6 GHz)
- RAM: 128 GB (4x64GB), 2 Channels, DDR4-3200 ECC RDIMM, Bandwidth: 102.4 GB/s
- GPU: 8\*NVIDIA GeForce RTX 4090 24GB (16384 CUDA Cores 3105MHz, 24GB GDDR6X 10501MHz 384-bit 1008 GB/s, PCIe4.0 x16)
- SSD: Intel SSD D7-P5520, 144-Layer TLC 3D NAND, 3.84TB 7.0PBW, U.2 15mm, PCIe4.0 x4, NVMe 1.4
  - SSD mounted at /data/ssd0
- SSD: Samsung PM893, V-NAND TLC, 960GB 1752TBW, 2.5in SATA 6Gb/s
- Network: Gigabit Ethernet

#### x7542
- 双精度浮点计算理论峰值：0.25536 TFLOPS
- 购置者：李建新100%
- 1\*IBM System x3850 X5
- Hostname: x008
- CPU: 4\*Intel Xeon X7542 (6 Cores, 18MB Cache, 2.66 GHz, 5.86 GT/s QPI)
- RAM: 512 GB, 64\*8GB DDR3-978 ECC RDIMM
- HDD: 146 GB 2.5in 10Krpm 3Gb/s SAS
- Network: Gigabit Ethernet

#### e74820v4

- 双精度浮点计算理论峰值：1.28 TFLOPS
- 购置者：陈申见100%
- 1\*Dell PowerEdge R930
- Hostname: r012
- CPU: 4\*Intel Xeon E7-4820 v4 (10 Cores, 25MB Cache, 2.00 GHz, 6.4 GT/s QPI)
- RAM: 256 GB (16x16GB), 4 Channels, DDR4-1333 ECC RDIMM
- HDD: 2\*600 GB 2.5in 15Krpm 12Gb/s SAS RAID1
- Network: Gigabit Ethernet

-->

# 存储资源

### 合计
- 总容量：4.61 PiB

### 总览
- 高速全闪：bbfs
- 家目录：fsb、fs04、fs08、fs09、fs10、fs12、fs13、fs14
- 支撑目录：fs00
- 归档存储：/archive

### 表格

[查看表格](https://table.nju.edu.cn/dtable/view-external-links/custom/hpc-storage/)
<iframe className="dtable-embed" src="https://table.nju.edu.cn/dtable/view-external-links/custom/hpc-storage/" frameBorder="0" width="100%" height="650" style="background: transparent; border: 1px solid #ccc;"></iframe>

# 并行存储

## 高速全闪（Tier 0）

特点：热数据、高性能

### /bbfs

采用全NVMe SSD构建的高性能Burst Buffer，具备极高的顺序和随机读写性能，无快照。

- 文件系统：bbfs
- 购置者：公共共享100%
- 可用容量：116.4 TiB
- IO节点：4\*HPE ProLiant DL380 Gen10: bb01 bb02 bb03 bb04
- CPU: 2*Intel Xeon Gold 5122 (2 Cores, 16.5MB Cache, 3.60 GHz)
- RAM: 192 GB (12x16GB), 6 Channels, DDR4-2666 ECC RDIMM
- Network: 2\*25 Gigabit Ethernet, 100 Gbit/s EDR InfiniBand, 100 Gbit/s Omni-Path
- SSD: 8\*Intel SSD DC P4510, 64-Layer TLC 3D NAND, 4TB 6.3PBW, 2.5in U.2 15mm, PCIe 3.1 x4 NVMe
- 保护：元数据和数据双副本

#### /bbfs/fs\*/

所有文件系统（/fs\*/）均在此目录中有映射，/bbfs/fs\*/ 是 /fs\*/ 的高速缓存，在 /bbfs/fs\*/ 中重读和写入具有极高的性能，与直接在 /fs\*/ 下相比有显著提升，保存在 /bbfs/fs\*/ 下的文件会自动回写 /fs\*/ 保存。

*如：作业输入文件位于 /fsb/home/yaoge/yaoge/in，如果此输入文件近期会被读取多次（无论是单个作业还是多个作业），则应将输入文件路径指定为 /bbfs/fsb/home/yaoge/yaoge/in，那么从第二次开始均从高速SSD上读取，减少作业读取文件上花费的时间。*

*如：作业输出文件如较大，则应将数据文件路径指定为 /bbfs/fsb/home/yaoge/yaoge/out，那么将直接写入高速SSD中，然后系统会自动将文件回写到 /fsb/home/yaoge/yaoge/out 便于长期保存，减少作业写入文件上花费的时间。*

#### /bbfs/scratch/

用于保存临时文件，超过30天没有访问（atime）的文件会被自动删除，适合于临时存储计算中间结果、checkpoint等无需长期保留的文件。文件名以 .tmp 和 .temp 结尾的文件保存为单副本（无数据保护）。

*如：作业运行过程中保存的Check Point文件或多个作业之间通过临时文件传输数据，这些文件无需长期保存，则可以保存在/bbfs/scratch/yaoge目录下，读写均在高速SSD上。*
<!---
### 只读缓存
部分计算节点有额外的SSD为并行文件系统提供本地高速缓存，可提升此节点元数据和数据的读取性能，具体节点详见[计算资源](https://doc.nju.edu.cn/books/efe93/page/d9640)-->

## 家目录（Tier 1）

特点：温数据、中性能
<!---
#### 快照
快照是特定时间点数据的只读副本，用户可以从中恢复删除的文件或文件的过往版本。部分家目录文件系统有快照，可以在文件系统目录/.snapshot中查找。

*如：/fsb的快照位于/fsb/.snapshots，/fsb/.snapshots/20220804-1800是2022年8月4日18时0分创建的快照，在这个目录下可以查阅快照创建时间点的所有文件。*
-->
### /fsb

- 购置者：公共共享100%
- 可用容量：1.26 PiB
<!---- 快照：每日0时创建；每天快照保留7天，每周快照保留2周-->
- 系统：Lenovo DSS-G 210
- 节点：2\*Lenovo ThinkSystem SR655 V3: dss01 dss02
- 网络：2\*25 Gigabit Ethernet, 200 Gbit/s HDR InfiniBand
- JBOD：1\*Lenovo D4390
- 硬盘：88\*Western Digital Ultrastar DC HC570 22TB 3.5-inch 7.2Krpm 12Gb/s SAS，2\*Samsung PM1655 800GB 3DWPD 2.5-inch 24Gb/s SAS 24Gb
- 保护：数据 Reed-Solomon code 8+2p，元数据 3副本

### /fs04
- 购置者：万贤纲100%
- 可用容量：13.1 TiB
- IO存储节点：Dell PowerEdge 12G R720xd: io08
- 网络：2\*10 Gigabit Ethernet
- RAID卡：Dell PERC H710P Mini (LSI SAS2208 ROC), 1GB cache with Intelligent Battery Backup Unit
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，每5个盘做一组RAID5，4组RAID5，2个热备盘

### /fs08
- 购置者：孙建100%
- 可用容量：13.1 TiB
- IO节点：2\*Inspur NF5270M3: io10 io11
- 网络：2\*1 Gigabit Ethernet, 40 Gbit/s QDR InfiniBand
- 存储：Inspur AS500H (NetApp E2600)，双控制器，每控制器 4GB 缓存带电池备份至闪存，Write caching with mirroring, High Performance Tier
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，每5个盘做一组RAID5，4组RAID5，2个全局热备盘

### /fs09
- 购置者：孙建100%
- 可用容量：23.5 TiB
- IO节点：2\*Inspur NF5270M3: io10 io11
- 网络：2\*1 Gigabit Ethernet, 40 Gbit/s QDR InfiniBand
- 存储：Inspur AS500H (NetApp E2600)，双控制器，每控制器 4GB 缓存带电池备份至闪存，Write caching with mirroring, High Performance Tier
- 硬盘：3TByte 3.5-inch 7.2Krpm 6Gb/s NL-SAS，12个盘做一个Disk Pool，保留1个硬盘空间，做2个Virtual Disk

### /fs10
- 购置者：王强华100%
- 可用容量：9.8 TiB
- IO存储节点：Inspur NF5270M3: io12
- 网络：2\*1 Gigabit Ethernet, 40 Gbit/s QDR InfiniBand
- RAID卡：LSI MegaRAID SAS 9271-8i (LSI SAS2208 ROC), 1GB缓存超级电容备份至闪存
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，每5个盘做一组RAID5，3组RAID5，1个全局热备盘

### /fs12
- 购置者：张海军100%
- 可用容量：13.1 TiB
- IO节点：2\*HP ProLiant DL380 Gen9: io01 io02
- 网络：2\*10 Gigabit Ethernet, 56 Gbit/s FDR InfiniBand
- 存储：HP MSA 2040 SAN，双控制器，每控制器 4GB 缓存带超级电容备份至闪存
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，每5个盘做一组RAID5，4组RAID5，3个全局热备盘

### /fs13
- 购置者：张海军100%
- 可用容量：29.1 TiB
- IO节点：2\*HP ProLiant DL380 Gen9: io01 io02
- 网络：2\*10 Gigabit Ethernet, 56 Gbit/s FDR InfiniBand
- 存储：HP MSA 2040 SAN，双控制器，每控制器 4GB 缓存带超级电容备份至闪存
- 硬盘：4TByte 3.5-inch 7.2Krpm 6Gb/s SAS，每6个盘做一组RAID6，2组RAID6，1个冷备盘

### /fs14
- 购置者：陈申见100%
- 可用容量：262 TiB
- IO节点：Dell PowerEdge R730: io13
- 网络：2\*10 Gigabit Ethernet
- RAID卡：Dell PERC H730P Mini (LSI SAS3108 ROC), 2GB NV cache with Intelligent Battery Backup Unit
- 硬盘：8TByte 3.5-inch 7.2Krpm 12Gb/s SAS，6个盘做一组RAID6
- RAID卡：Dell PERC H830 (LSI SAS3108 ROC), 2GB NV cache with Intelligent Battery Backup Unit
- JBOD：8TByte 3.5-inch 7.2Krpm 12Gb/s SAS，6个盘做一组RAID6，8组RAID6

## 支撑目录

### /fs00
<!---
- 购置者：公共共享100%
- 可用容量：7.3 TiB
- IO节点：4\*HPE ProLiant DL380 Gen10: bb01 bb02 bb03 bb04
- 网络：2\*25 Gigabit Ethernet, 100 Gbit/s EDR InfiniBand, 100 Gbit/s Omni-Path Architecture
- 硬盘：Intel SSD DC P4510, 64-Layer TLC 3D NAND, 2TB 2.61PBW, 2.5in U.2 15mm, PCIe 3.1 x4 NVMe
- 保护：所有元数据和数据以三副本形式保护-->

- 购置者：公共共享100%
- 可用容量：3.3 TB
<!---- 快照：每日0时创建；每天快照保留7天，每周快照保留12周-->
- IO节点：HP ProLiant DL380 Gen9: io01 io02
- 网络：2\*10 Gigabit Ethernet, 56 Gbit/s FDR InfiniBand
- 存储：HP MSA 2040 SAN，双控制器，每控制器 4GB 缓存带超级电容备份至闪存
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，2个盘做一组RAID1，2组RAID1，1个全局热备盘
- IO节点：Inspur NF5270M3: io10 io11
- 网络：2\*1 Gigabit Ethernet, 40 Gbit/s QDR InfiniBand
- 存储：Inspur AS500H (NetApp E2600)，双控制器，每控制器 4GB 缓存带电池备份至闪存，Write caching with mirroring, High Performance Tier
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，2个盘做一组RAID1，2个全局热备盘
- IO存储节点：Inspur NF5270M3: io12
- 网络：2\*1 Gigabit Ethernet, 40 Gbit/s QDR InfiniBand
- RAID卡：LSI MegaRAID SAS 9271-8i (LSI SAS2208 ROC), 1GB cache with Battery Backup Unit
- 硬盘：900GB 2.5-inch 10Krpm 6Gb/s SAS，2个盘做一组RAID1，1个全局热备盘
- 保护：RAID1+元数据和数据双副本

# 归档存储（Tier 2）

特点：冷数据、低性能、快照

### /archive

- 购置者：公共共享100%
- 可用容量：2.88 PiB
- 快照：每日0时创建；每天快照保留7天，每周快照保留4周
- IO存储节点：Dell PowerEdge R740xd: zfs
- 网络：2\*25 Gigabit Ethernet
- 保护：RAID-Z3
- 访问范围：/archive 仅登录节点

#### 快照
快照是特定时间点数据的只读副本，用户可以从中恢复删除的文件或文件的过往版本，可以在文件系统目录/.zfs/snapshot中查找。

*如：/archive的快照位于/archive/.zfs/snapshot，/archive/.zfs/snapshot/20220904-0000是2022年9月4日0时0分创建的快照，在这个目录下可以查阅快照创建时间点的所有文件。*

# 对象存储（Tier 2）

打破壁垒实现集群内外数据的统一访问。同一份数据，集群内外共同使用，访问方式相同，再无迁移数据的烦恼！

### s3.nju.edu.cn

- 购置者：公共共享100%
- 裸容量：2.12 PB
- 系统：紫光西部数据 UniverStor P20000
- 网络：12\*10 Gigabit Ethernet
- 保护：纠删码 Large object: 15/4, Small object: 6/4
- 协议：S3
- Endpoint: http://s3.nju.edu.cn OR https://s3.nju.edu.cn
- Region: “空” 或 us-east-1
- 访问范围：集群、校园网、互联网

# 临时目录

- 计算和登录节点的本地目录，节点间相互独立不能跨节点互访
- 超过24小时未访问且节点无文件所有者进程的文件会被自动删除

### /tmp/ /var/tmp/
节点本地根文件系统的临时文件目录

### /dev/shm/
节点内存中的临时文件系统目录，容量为总内存的一半，重启不保留

### /ssd/ /tmp/ssd
部分节点有额外的SSD用于临时存储，则挂载于此目录
<!--
-----

## 退出服务

##### /fs04
- 可用容量：885 GB
- IO存储节点：IBM System x3650: io03
- RAID卡：IBM ServeRAID 8k (Adaptec), 256MB cache with battery
- 硬盘：146GB 3.5-inch 10Krpm 3Gb/s SAS，每5个盘做一组RAID5，每节点1组共2组RAID5，每节点1个热备盘

##### /fs02
- 可用容量：7.3 TB
- IO节点：IBM System x3650 M3: io05
- 网络：Chelsio 20 Gigabit Ethernet
- 存储：IBM System Storage DS3200, 1GB cache with battery backup
- 硬盘：2TByte 3.5-inch 7.2Krpm 3Gb/s SATA，6个盘做一组RAID6

##### /fs06
- 可用容量：443 GB
- IO存储节点：HP ProLiant DL380 G5: io09
- 高速网络：20 Gbit/s DDR InfiniBand
- RAID卡：HP Smart Array P400, 512MB Battery-Backed Write Cache
- 硬盘：146GB 2.5-inch 10Krpm 3Gb/s SAS，5个盘做一组RAID5，1个热备盘

##### /fs07
- 可用容量：7.3 TB
- IO节点：HP ProLiant DL380 G5: io09
- 高速网络：20 Gbit/s DDR InfiniBand
- 存储：HP StorageWorks MSA2312sa G2 单控制器
- 硬盘：1TByte 3.5-inch 7.2Krpm 3Gb/s SATA，每6个盘做一组RAID6，2组RAID6

##### /fs05
- 可用容量：1010 GB
- IO存储节点：HP ProLiant DL380 G5: io04
- RAID卡：HP Smart Array P400, 512MB Battery-Backed Write Cache
- 硬盘：300GB 2.5-inch 10Krpm 3Gb/s SAS，5个盘做一组RAID5，1个热备盘

##### /fs05b
- 可用容量：932 GB
- IO存储节点：HP ProLiant DL380 G5: io04
- RAID卡：HP Smart Array P400, 512MB Battery-Backed Write Cache
- 硬盘：1TByte 2.5-inch 7.2Krpm 3Gb/s NL-SAS，1个盘RAID0

##### /fs03
- 可用容量：2.2 TB
- IO存储节点：Dell PowerEdge 12G R720: io07
- RAID卡：Dell PERC H710P Mini (LSI SAS2208 ROC), 1GB cache with Intelligent Battery Backup Unit
- 硬盘：600GB 2.5-inch 10Krpm 6Gb/s SAS，5个盘做一组RAID5，1个热备盘

##### /fs11
- 可用容量：16 TB
- IO节点：Dell PowerEdge 12G R720: io07
- 存储：Dell MD3200i 单控，2GB cache with battery backup
- 硬盘：2TByte 3.5-inch 7.2Krpm 6Gb/s NL-SAS，12个盘做一个Disk Pool，保留1个硬盘空间，做一个Virtual Disk

##### /fs01
- 文件系统：fs01
- 购置者：公共共享100%（原邢定钰50%，舒大军50%）
- 可用容量：4.4 TB
- IO存储节点：IBM System x3650 M3: io05 io06
- 网络：Chelsio 2\*10 Gigabit Ethernet
- RAID卡：IBM ServeRAID M5015 (LSI SAS2108 ROC), 512MB cache with Battery Backup Unit
- 硬盘：300GB 2.5-inch 10Krpm 6Gb/s SAS，每5个盘做一组RAID5，每节点2组共4组RAID5，每节点1个热备盘

##### /fsa

- 购置者：公共共享100%
- 可用容量：361 TiB
- IO节点：2\*HP ProLiant DL380 Gen9: io01 io02
- 网络：2\*10 Gigabit Ethernet, 56 Gbit/s FDR InfiniBand
- 存储：DDN SFA7700X，双控制器，每控制器 32GB 缓存带电池备份至闪存
- 硬盘：Data: 10TB 3.5-inch 7.2Krpm 12Gb/s SAS，每10个盘做一组RAID6，5组RAID6。Metadata: Toshiba Enterprise SSD PX02SMU040 MLC 10DWPD 400GB 2.5-inch 12Gb/s SAS，10个盘做一组RAID6。
-->