HPE 推出面向高性能计算和人工智能集群的存储系统

HPE Cray 存储系统 C500 经过优化,旨在避免 I/O 瓶颈,同时其入门价格低于为顶级超级计算机设计的 Cray 系统。
2024-05-09 17:11:40  |   作者:开源爱好者  |   来源:

HPE 推出面向高性能计算和人工智能集群的存储系统

HPE Cray 存储系统 C500 经过优化,旨在避免 I/O 瓶颈,同时其入门价格低于为顶级超级计算机设计的 Cray 系统。
2024-05-09 17:11:40
作者:开源爱好者
来源:

HPE推出了HPE Cray Storage Systems C500,这是一款面向高性能计算和人工智能计算集群的入门级和中端存储系统。

HPE Cray Storage Systems C500 经过优化以避免I/O瓶颈,其入门价格低于为顶级超级计算机设计的Cray系统。该系统是Cray ClusterStor E1000存储系统的衍生产品,后者是一种常用于超大规模、准超大规模和国家人工智能超级计算机的外部并行文件系统,通常与HPE Cray EX服务器一起使用。C500同样基于并行文件系统技术,旨在减少高性能计算(HPC)系统的I/O瓶颈,并针对大规模性能进行了优化。它特别面向在小型集群上运行建模、仿真和人工智能工作负载的客户。

图片8.jpg

高性能计算通常被视为一种高端服务,但事实并非总是如此。HPE并行HPC和AI存储产品营销经理Ulrich Plechschmidt指出,有些客户可能希望从较小的部署开始,然后再逐步发展壮大。

“这些客户仍然需要并希望获得Cray ClusterStor E1000存储系统久经考验的领先存储技术。但他们需要的是一个明显更低的入门价格,以适应他们正在运行融合MOD/SIM和AI/ML工作负载的计算集群的规模。”他在一篇宣布新存储阵列的博文中写道。

“作为回应,我们将发布HPE Cray存储系统C500,它能以更低的入门价格提供这些领先的存储技术,并提高易用性。”他补充说。

C500使用嵌入式开源Lustre文件系统,无需基于容量的许可,利用率高达90%,远高于一般的数据中心存储系统。它的IOPS也比传统存储系统高得多,整体性能更快。

"Plechschmidt通过电子邮件告诉我,并行文件系统与标准企业级NAS相比的一个巨大优势是,它能够从每个固态硬盘通过网络到计算节点之间实现更高的性能。"

HPE在2019年收购Cray时获得了ClusterStor产品线。在高端,它可以扩展到数十PB的固态硬盘存储,提供高达1.6TBps的吞吐量和每机架5000万IOPS。许多大型超级计算机都使用了ClusterStor,其中包括三台已知的超大规模超级计算机:Frontier、Aurora和El Capitan。

虽然C500与ClusterStor E1000有很多共同点,但也有一些不同之处。E1000的系统管理单元(SMU)使用的是2U24存储控制器,而C500则使用了性价比更高的HPE ProLiant DL325 Gen11服务器。此外,C500还使用了更少的控制器来管理硬盘,并且C500机箱在存储硬盘数量方面提供了更大的灵活性。

超级计算应用需要与高性能计算元素相匹配的高性能存储解决方案。这一点在今天尤为重要,因为人工智能已经吸引了新一轮的超级计算用户。专门从事高性能计算和超级计算研究的Intersect360 Research公司CEO Addison Snell表示:“虽然有些机构可能不认为这是‘超级计算’,但在多个高速节点上并行地对海量数据集进行大型模型训练……这本质上是一种相同的工作,当然也需要高性能存储。”

HPE Cray Storage Systems C500将于5月27日从HPE及其经销商处开始发售。