AI时代的高端文件存储系统：IBM、DDN、Weka 和 VAST

全文概述

本文对比了AI时代高端文件存储系统IBM、DDN、Weka和VAST的性能，重点分析了读写带宽和IOPS。Weka在读带宽和IOPS方面领先，IBM在写带宽上表现优异，而VAST则以其独特的Cbox和Dbox架构及易用性见长。这些系统均适用于大规模GPU集群的AI训练和推理应用。

主要厂商及其产品特点

IBM Storage Scale System 6000基于GPFS，支持扩展至1000节点，提供高达310GB/s的读带宽和155GB/s的写带宽。DDN EXAScaler系列改进自Lustre开源文件系统，具有高密度NVMe SSD配置。Weka使用AMD EPYC处理器，强调每RU性能，尤其在读IOPS方面表现出色。VAST采用Cbox和Dbox架构，利用SCM SSD提升写入性能。

性能对比与分析

从每Rack Unit性能来看，Weka在读带宽和IOPS方面领先，IBM在写带宽上表现最佳，DDN在写IOPS上有优势，而VAST虽然读带宽尚可但IOPS较低。各厂商的产品在不同应用场景下各有优劣，需根据具体需求选择。

应用场景与推荐

这些高性能文件存储系统主要用于AI训练和推理，特别是搭配GPU集群。Weka和IBM SSS 6000获得AMD GPU集群推荐，因其在性能和兼容性方面的表现。此外，Dell PowerScale等品牌也符合类似要求。

VAST的独特架构

VAST的Cbox和Dbox架构通过以太网NVMe over Fabric连接，实现共享所有SSD资源。Cbox作为无状态文件协议访问节点，Dbox则包含QLC和SCM SSD，早期使用Optane SSD作为写缓存。这种架构设计提升了系统的灵活性和扩展性。