DeepSeek开源周第五天：6.6TiB/s震撼来袭！3FS重塑AI存储基础设施

DeepSeek推出的全新AI存储系统DeepSeek，其核心是高性能分布式文件系统3FS (Fire-Flyer File System)，它能够显著提升Smallpond的性能。

技术亮点：突破性的存储性能和效率

3FS架构旨在实现高吞吐量和低延迟的存储性能，在180个节点的集群测试中，其峰值写入速度达到惊人的6.6TiB/s，远超同类产品；同时，它还集成了KVCache缓存技术，读取速度可达40GiB/s；此外，GraySort排序算法的应用使数据排序效率提升至3.66TiB/min (25个节点)。这些成果得益于SSD和RDMA技术的应用，显著降低了存储延迟，提升了整体性能，满足了AI大模型训练对高性能存储的需求。

系统架构：高效的AI存储解决方案

DeepSeek V3/R1版本基于3FS构建，并进行了多项优化，增强了其稳定性和扩展性；3FS提供高性能的存储能力，实现了对海量数据的快速访问；此外，该系统充分利用了现有资源，提升了存储效率，降低了总体拥有成本；它兼容多种硬件配置，并对各种规模的集群部署提供支持；该系统还可与DuckDB数据库无缝集成，实现高效的数据分析和处理，充分满足AI应用对高性能存储的需求。

产品应用：赋能AI应用，加速模型训练

3FS和Smallpond协同工作，共同构建了DeepSeek的存储基础架构；DeepSeek的出现，标志着AI存储技术取得了显著进展；它通过高效的存储性能和资源利用，显著加速了AI大模型的训练和推理过程，使其能够处理更大规模的数据集；同时，它与业界主流存储系统Ceph、Lustre相比，具备显著的性能优势，进一步推动了AI技术的创新和发展。

项目地址：

3FS → https://github.com/deepseek-ai/3FS

Smallpond -3FS→相关存储组件：https://github.com/deepseek-ai/smallpond