当“闪电”照进数据中心墙裂推荐
它曾是一个神秘代号
激起无数好奇与期待
它曾在DTW公开
令高性能计算与存储领域为之震动
如今,它正式到来
Dell Lightning File System
高性能并行文件系统
背后的故事
近年来,随着多GPU服务器的普及,企业计算、大规模训练与推理等场景对高性能文件访问能力的需求增长。
传统并行文件系统,那些最初为科学计算顺序读写而设计的架构,在面对海量小文件随机访问、高频元数据操作和高并发负载时, 逐渐力不从心。
戴尔的应对之策是什么?答案指向一个代号: Project Lightning。这个神秘的项目一经传出,便引发广泛关注。
随着面纱渐渐揭开, 2024年的戴尔科技全球峰会(DTW)上,Project Lightning 正式启动。
当时,戴尔ISG部门营销高级副总裁 Varun Chhabra明确阐述:
“Project Lightning将为PowerScale中的非结构化数据提供并行文件系统,带来极致性能和无与伦比的效率,可实现高达 97%的网络利用率,满足数千GPU的数据密集型需求。”
今年3月,在 2026 NVIDIA GTC大会上,戴尔正式宣布, Lightning FS即将上市。
从内部代号到可交付的产品,Project Lightning终于完成了蜕变。
全球速度领先
Lightning FS是 全球速度领先的并行文件系统。根据内部测试数据,Lightning FS 每机架单元提供的吞吐量可达同类并行文件系统的两倍(实际性能可能有所差异);相较于传统纯闪存横向扩展文件存储竞品, 性能提升更是高达20倍。
与PowerScale和ObjectScale协同工作
Lightning FS并不替代现有存储,而是作为 第0层存储,为智能训练和推理提供极 高性能的临时工作空间和存储,与PowerScale(企业级文件服务)和ObjectScale(海量对象存储)形成协同,共同构成一个完整的数据管道。

PowerScale和ObjectScale服务于更广泛的数据生命周期,包括数据摄入、清洗、特征存储、归档等环节。
用户可以在PowerScale和ObjectScale平台上进行快速数据访问和准备,在Lightning FS上实现极致的训练和推理吞吐量,这种组合方案帮助用户 在成本、性能和可管理性之间实现优化平衡。
直通NVMe,绕过缓存
Lightning FS采用基于网络结构的架构,支持计算节点通过RDMA 直接访问NVMe存储设备,以及 重定向写入语义,无需经过控制器节点或复杂的写入缓存。
这使得它在顺序和随机读取方面都能实现 接近线速的效率,并且随着群集扩展, 性能可预测地线性增长。
分布式元数据,无热点瓶颈
传统系统在海量小文件并发访问时,元数据节点极易成为瓶颈。Lightning FS 将元数据全域分布于所有节点,避免单一热点,确保元数据操作始终高效。
扁平化命名空间
通过扁平化命名空间设计,Lightning FS大幅减 少了文件访问所需的目录遍历步骤。同时,数据路径被预先规划,性能表现稳定,不会因并发升高而出现剧烈波动。
适用场景
Dell Lightning FS为那些需要 在大规模环境下追求更高GPU利用率和更短训练时间的场景而设计。
目标用户包括:大规模云服务提供商、高性能计算中心、实时数据分析平台,以及任何 需要驱动数万计算节点或总吞吐超过4TB/s的基础设施团队。
在这些环境中,存储效率的每一点提升,都能直接转化为 硬件成本的节省和 作业周期的缩短。
同时,Lightning FS前瞻性的架构能够随着服务器与网络技术的发展持续升级,确保用户的 投资持续增值。
“
我们期待与戴尔合作,支持我们的前沿项目。我们相信,Lightning FS将成为我们智能创新的关键存储技术。
”
——Paul Calleja 博士
剑桥大学 Open Zettascale
实验室与研究计算服务部主任
预告
各位读者,如果您想进一步了解Lightning FS, 5月18-21号,企业级IT的重磅盛会: 戴尔科技全球峰会(DTW)即将召开。
