本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
固态硬盘和硬盘存储类别的性能特征
配置了 SSD 或 HDD 存储等级的 for Lustre 文件系统所支持的吞吐量与其存储容量成正比。 FSx Amazon f FSx or Lustre 文件系统可扩展到吞吐 TBps量的倍数和数百万的 IOPS。Amazon FSx for Lustre 还支持从数千个计算实例同时访问同一个文件或目录。这种访问可以实现从应用程序内存到存储的快速数据检查点,这是高性能计算(HPC)中的常用技术。创建文件系统后,您可以根据需要,随时增加存储容量和吞吐能力。有关更多信息,请参阅 管理存储容量。
FSx for Lustre 文件系统使用网络 I/O 信用机制提供突发读取吞吐量,根据平均带宽利用率分配网络带宽。文件系统在网络带宽低于其基准限制时会积累积分,并能够在执行网络数据传输时使用这些积分。
下表显示了使用 SSD 和 HDD 存储类别的 for Lustre 部署选项的设计性能。 FSx
部署类型 | 网络吞吐量(MBps/TiB 预配置的存储空间) | 网络 IOPS(预置存储的 IOPS/TiB) | 缓存存储空间(预配置了 GiB RAM/TiB 的存储空间) | 每次文件操作的磁盘延迟(毫秒,P50) | 磁盘吞吐量(MBps/TiB 的存储空间或 SSD 缓存已配置) | ||
---|---|---|---|---|---|---|---|
基准 |
突增 |
基准 |
突增 |
||||
SCRATCH_2 | 200 | 1300 | 数万基准 数十万突增 |
6.7 |
元数据:亚毫秒 数据:亚毫秒 |
200(读取) 100(写入) |
‐ |
PERSISTENT-125 | 320 | 1300 | 3.4 |
125 |
500 | ||
PERSISTENT-250 | 640 | 1300 | 6.8 |
250 |
500 | ||
PERSISTENT-500 | 1300 | ‐ | 13.7 | 500 | ‐ |
||
PERSISTENT-1000 | 2600 | ‐ | 27.3 | 1000 | ‐ |
部署类型 | 网络吞吐量(MBps/TiB 的存储空间或 SSD 缓存已配置) | 网络 IOPS(预置存储的 IOPS/TiB) | 缓存存储空间(预配置了 GiB RAM/TiB 的存储空间) | 每次文件操作的磁盘延迟(毫秒,P50) | 磁盘吞吐量(MBps/TiB 的存储空间或 SSD 缓存已配置) | ||
---|---|---|---|---|---|---|---|
基准 |
突增 |
基准 |
突增 |
||||
PERSISTENT-12 | |||||||
HDD 存储 | 40 | 375* |
数万基准 数十万突增 |
0.4 内存 |
元数据:亚毫秒 数据:个位数毫秒 |
12 |
80(读取) 50(写入) |
SSD 读取缓存 |
200 |
1,900 |
200 SSD 缓存 |
数据:亚毫秒 |
200 |
- |
|
PERSISTENT-40 | |||||||
HDD 存储 | 150 | 1,300* |
数万基准 数十万突增 |
1.5 |
元数据:亚毫秒 数据:个位数毫秒 |
40 |
250(读取) 150(写入) |
SSD 读取缓存 |
750 |
6500 |
200 SSD 缓存 |
数据:亚毫秒 |
200 |
- |
部署类型 | 网络吞吐量(MBps 每 TiB 的预配置存储) | 网络 IOPS(预置存储的 IOPS/TiB) | 缓存存储(预置存储的 GiB/TiB) | 每次文件操作的磁盘延迟(毫秒,P50) | 磁盘吞吐量(MBps 每 TiB 的存储空间或预配置 SSD 缓存) | ||
---|---|---|---|---|---|---|---|
基准 |
突增 |
基准 |
突增 |
||||
PERSISTENT-50 | 250 | 1,300* | 数万基准 数十万突增 |
2.2 RAM |
元数据:亚毫秒 数据:亚毫秒 |
50 | 240 |
PERSISTENT-100 | 500 | 1,300* | 4.4 内存 | 100 | 240 | ||
PERSISTENT-200 | 750 | 1,300* | 8.8 RAM | 200 | 240 |
注意
* 以下永久文件系统可 AWS 区域 提供高达 MBps 每 TiB 530 个存储空间的网络爆发:非洲(开普敦)、亚太地区(香港)、亚太地区(大阪)、亚太地区(新加坡)、加拿大(中部)、欧洲(法兰克福)、欧洲(伦敦)、欧洲(米兰)、欧洲(斯德哥尔摩)、中东(巴林)、南美(圣保罗)、中国、和美国西部(洛杉矶)。
例如:聚合基准吞吐量和突增吞吐量
以下示例说明了存储容量和磁盘吞吐量对文件系统性能的影响。
永久文件系统的存储容量为 4.8 TiB,每单位存储的吞吐量为 50 MBps TiB,其总基准磁盘吞吐量为 240 MBps ,突发磁盘吞吐量为 1.152。 GBps
无论文件系统大小如何,Amazon f FSx or Lustre 都为文件操作提供一致的亚毫秒级延迟。