您现在的位置是：首页 > 科技行业网站首页科技行业

DeepSeek开源周最后一天，推出了名为3FS（Fire-Flyer File System）的并行文件系统，这标志着数据处理能力实现了质的飞跃，从“自行车速度”升级到“高铁速度”。

3FS专为AI训练和推理工作负载设计，充分利用现代固态硬盘（SSD）和远程直接内存访问（RDMA）网络的带宽优势。在180节点集群中，3FS实现了6.6 TiB/s的聚合读取吞吐量，在GraySort基准测试中，25节点集群的吞吐量达到3.66 TiB/min。此外，每个客户端节点在KVCache查找时的峰值吞吐量超过40 GiB/s。

3FS的架构采用分离式设计，确保强一致性语义，支持训练数据预处理、数据集加载、检查点保存/重新加载、嵌入向量搜索和KVCache查找等多种应用场景。DeepSeek V3、R1模型均采用了这一系统。

3FS的开源，意味着AI社区获得了一个强大的数据处理工具，将极大地推动AI技术的发展。它不仅简化了分布式应用程序的开发，还通过结合数千个SSD的吞吐量和数百个存储节点的网络带宽，使应用程序能够以不受位置限制的方式访问存储资源。

这一创新成果得到了开发者的高度评价，认为3FS和Smallpond在AI数据处理方面树立了新标杆。随着DeepSeek持续开源和创新，AI技术的未来令人期待。