硬盘技术可以追溯到20世纪50年代,至今仍依赖于数十年前的I/O标准。希捷计划将硬盘带入基于PCIe的未来——这一转变是由人工智能训练和推理对更快存储的需求不断增长所推动的,尤其是在大量耗能的数据中心。
[Cl0Kw.LD
vmqa_gU\ 希捷最近推出了一种新颖的HDD开发和演进方法,将磁性存储和NVMe结合在一起,形成了一种新的存储技术。该制造商希望通过提供比固态硬盘便宜得多的解决方案来简化和改善AI公司的数据存储。
f+^6.% N `|A 硬盘驱动器永远无法达到与SSD相同的性能水平,但希捷表示可以改进它们,以便在下一代数据中心更有效地使用。该公司正在通过为高容量硬盘驱动器添加NVMe兼容性来开创一种“变革性”解决方案。
EL?(D !4vb{AH 希捷解释说,通过采用基于PCIe的协议,NVMe硬盘可以消除与传统SAS/SATA接口、主机总线适配器(HBA)和不适合AI工作负载的控制器架构绑定的专有芯片的需求。新协议有望实现高吞吐量和低延迟,尽管很难想象未来硬盘驱动器以每秒GB的速度移动数据。
W[8Kia-OD !%G]~ 这些NVMe硬盘没有HBA或自定义控制器,但它们将保留相同的SAS/SATA连接器以提高兼容性。新技术将简化AI存储解决方案的部署,而单个NVMe软件驱动程序堆栈应该可以使HDD和SSD更有效地协同工作。
OyZR&,q fCr2'+O"b 希捷还宣称,它能够将NVMe驱动器直接连接到GPU,从而绕过传统数据通过CPU路由造成的瓶颈。新架构效率更高,因此AI模型可以处理海量数据集,同时减少I/O延迟。此外,新颖的NVMe over Fabrics(NVMe-oF)技术应该将HDD带入完全分布式、可扩展的存储架构。
1Z# $X` ?G,4N<]Nu 希捷通过定制HDD、NVMe SSD、NVIDIA BlueField数据处理单元(DPU)和AIStore软件之间的概念验证集成测试了NVMe硬盘的潜在影响。虽然该公司尚未提供有关性能的具体指标,但它声称新平台为AI工作流程提供了一些关键优势。通过DPU进行的直接GPU到存储通信减少了与存储相关的延迟,同时消除了更简单的系统架构中传统的SAS/SATA开销。
G]'ah1W .11l(M 此外,AIStore软件有助于优化数据缓存,从而提高AI模型训练性能,而NVMe-oF集成则证明了其在多机架存储集群中的实用性。希捷表示,NVMe HDD每TB的碳效率是SSD的10倍,功耗效率是SSD的4倍,每TB的成本“显著降低”。该公司目前正致力于扩展其基于HAMR的Mozaic 3+平台并开发更高容量的硬盘驱动器,同时与合作伙伴一起探索NVMe存储解决方案。
NKO"'