什么值得买App下载 App ›
连续签到专享现金活动

美光®助力高性能计算新前沿

将圆周率计算至小数点后314万亿位是一项极具挑战性的工作负载。此次测试在一台单台服务器上连续运行了110多天,旨在对现代服务器的存储系统进行极限压力测试。核心目的在于验证单个系统是否能持续数月不间断进行PB字节级别的I/O操作,以及存储架构在长时间运行下的稳定性与一致性。
01测试背景与架构配置
为了完成这一极端工作负载,测试构建了高密度的单服务器存储架构。系统在Dell PowerEdge R7725服务器上部署了40块大容量NVMe SSD,总可用闪存容量超过2.1PB。这种单节点架构替代了传统的分布式存储系统,通过纵向扩展提供了PB级容量和足够的总带宽,同时简化了运行模型,减少了组件和故障域。
配置维度详细参数功能用途
服务器平台Dell PowerEdge R7725单机柜承载整个计算负载
存储介质40块NVMe SSD (E3.S规格)提供高带宽与大容量
总容量超过 2.1 PB满足中间数据暂存需求
存储分配34块用于计算,6块用于RAID10分别作为暂存空间与结果存储
运行时长连续 110 多天验证长期稳定性

存储压力测试系统配置概览

02技术挑战:持续I/O与一致性要求
圆周率计算任务对存储系统的压力并非来自峰值性能,而是来自长达三个多月的持续高强度混合读/写操作。该工作负载呈现出高性能计算(HPC)和AI环境共有的特征,要求存储系统具备持续高带宽、长时间高强度写入能力,以及对延迟的高可预测性。任何存储故障或性能抖动都可能导致数周的计算成果付诸东流。
  • 巨大的暂存空间需求
    应用程序需要存放用于FFT密集型数学运算的大型临时数组,峰值时占用空间高达1.43 PiB。
  • 全面状态检查
    需要频繁进行状态检查以确保持续数周的工作不会因意外而前功尽弃,检查点文件大小可达数百TB。
  • 数据验证与一致性
    在长达数月的运行中,必须存放验证数据,确保计算过程中数据的准确一致,以及多精度中间值的存储。
03对AI与数据中心基础设施的启示
此次测试的结果表明,PB级暂存工作负载可完全在单节点NVMe上运行。测试期间系统始终保持在线,未因故障恢复,证明了存储架构的一致性和耐久性。这一发现对于现代数据中心规划具有重要意义,特别是在大规模AI训练、科学模拟等需要长时间运行的数据密集型场景中。

基础设施规划考量维度

性能与时间维度

关注长期运行的稳定性

  • 持续的吞吐量比突发性能更重要,混合读写负载下的一致性优于短时间峰值。
  • 延迟的可预测性是关键,异常延迟会导致检查点推迟甚至任务失败。
  • 稳定负载下的耐久性和可靠性,能暴露短时间测试无法发现的问题。
架构与运维维度

关注单节点高密度架构的价值

  • 提高每台服务器的性能密度,将PB级容量整合到单一系统,降低网络开销。
  • 简化运营,减少对外部存储架构或大型集群的依赖,缩小故障影响范围。
  • 纵向扩展方案在特定场景下可替代横向扩展,降低功耗、散热及管理复杂度。
综上所述,314万亿位圆周率的计算成功验证了单节点高密度NVMe存储在处理长期、大规模数据密集型工作负载时的可行性。对于企业和IT部门而言,规划基础设施时应更关注存储系统在长时间运行中的可预测性能和稳定性,而非仅仅追求峰值指标。这种架构演进有助于降低运营风险,提升数据中心的整体效率。

评论

评论区空态插画

当前文章无评论,是时候发表评论了