固态硬盘和硬盘存储类别的性能特征 - FSx 为了光泽

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

固态硬盘和硬盘存储类别的性能特征

配置了 SSD 或 HDD 存储等级的 for Lustre 文件系统所支持的吞吐量与其存储容量成正比。 FSx Amazon f FSx or Lustre 文件系统可扩展到吞吐 TBps量的倍数和数百万的 IOPS。Amazon FSx for Lustre 还支持从数千个计算实例同时访问同一个文件或目录。这种访问可以实现从应用程序内存到存储的快速数据检查点,这是高性能计算(HPC)中的常用技术。创建文件系统后,您可以根据需要,随时增加存储容量和吞吐能力。有关更多信息,请参阅 管理存储容量

FSx for Lustre 文件系统使用网络 I/O 信用机制提供突发读取吞吐量,根据平均带宽利用率分配网络带宽。文件系统在网络带宽低于其基准限制时会积累积分,并能够在执行网络数据传输时使用这些积分。

下表显示了使用 SSD 和 HDD 存储类别的 for Lustre 部署选项的设计性能。 FSx

SSD 存储选项的文件系统性能
部署类型 网络吞吐量(MBps/TiB 预配置的存储空间) 网络 IOPS(预置存储的 IOPS/TiB) 缓存存储空间(预配置了 GiB RAM/TiB 的存储空间) 每次文件操作的磁盘延迟(毫秒,P50) 磁盘吞吐量(MBps/TiB 的存储空间或 SSD 缓存已配置)

基准

突增

基准

突增

SCRATCH_2 200 1300

数万基准

数十万突增

6.7

元数据:亚毫秒

数据:亚毫秒

200(读取)

100(写入)

PERSISTENT-125 320 1300 3.4

125

500
PERSISTENT-250 640 1300 6.8

250

500
PERSISTENT-500 1300 13.7 500

PERSISTENT-1000 2600 27.3 1000
HDD 存储选项的文件系统性能
部署类型 网络吞吐量(MBps/TiB 的存储空间或 SSD 缓存已配置) 网络 IOPS(预置存储的 IOPS/TiB) 缓存存储空间(预配置了 GiB RAM/TiB 的存储空间) 每次文件操作的磁盘延迟(毫秒,P50) 磁盘吞吐量(MBps/TiB 的存储空间或 SSD 缓存已配置)

基准

突增

基准

突增

PERSISTENT-12
HDD 存储 40 375*

数万基准

数十万突增

0.4 内存

元数据:亚毫秒

数据:个位数毫秒

12

80(读取)

50(写入)

SSD 读取缓存

200

1,900

200 SSD 缓存

数据:亚毫秒

200

-

PERSISTENT-40
HDD 存储 150 1,300*

数万基准

数十万突增

1.5

元数据:亚毫秒

数据:个位数毫秒

40

250(读取)

150(写入)

SSD 读取缓存

750

6500

200 SSD 缓存

数据:亚毫秒

200

-

上一代 SSD 存储选项的文件系统性能
部署类型 网络吞吐量(MBps 每 TiB 的预配置存储) 网络 IOPS(预置存储的 IOPS/TiB) 缓存存储(预置存储的 GiB/TiB) 每次文件操作的磁盘延迟(毫秒,P50) 磁盘吞吐量(MBps 每 TiB 的存储空间或预配置 SSD 缓存)

基准

突增

基准

突增

PERSISTENT-50 250 1,300*

数万基准

数十万突增

2.2 RAM

元数据:亚毫秒

数据:亚毫秒

50

240

PERSISTENT-100 500 1,300* 4.4 内存 100 240
PERSISTENT-200 750 1,300* 8.8 RAM 200 240
注意

* 以下永久文件系统可 AWS 区域 提供高达 MBps 每 TiB 530 个存储空间的网络爆发:非洲(开普敦)、亚太地区(香港)、亚太地区(大阪)、亚太地区(新加坡)、加拿大(中部)、欧洲(法兰克福)、欧洲(伦敦)、欧洲(米兰)、欧洲(斯德哥尔摩)、中东(巴林)、南美(圣保罗)、中国、和美国西部(洛杉矶)。

例如:聚合基准吞吐量和突增吞吐量

以下示例说明了存储容量和磁盘吞吐量对文件系统性能的影响。

永久文件系统的存储容量为 4.8 TiB,每单位存储的吞吐量为 50 MBps TiB,其总基准磁盘吞吐量为 240 MBps ,突发磁盘吞吐量为 1.152。 GBps

无论文件系统大小如何,Amazon f FSx or Lustre 都为文件操作提供一致的亚毫秒级延迟。