作者 | 火山引擎存储团队 2025 年 2 月 28 日,DeepSeek 在其开源周最后一天压轴发布了自研的并行文件系统 Fire-Flyer File System,简称 3FS。该系统支撑了 DeepSeek V3&R1 模型训练、推理的全流程,在数据预处理、数据集加载、CheckPoint、KVCache 等场景发挥了重要作用。
DeepSeek开源周的最后一天,居然提到了一个叫3FS(Fire-Flyer File System)的高性能分布式文件存储系统,这是一个用于分布式计算的并行文件系统,是为AI训练和推理准备的。 3FS充分了利用现代化的NVMe SSD和RDMA(一个绕过CPU和系统的高效内存访问技术)网络的带宽 ...
2 月 28 日,DeepSeek 开源周第五日迎来了 Fire-Flyer File System (3FS):一套基于现代 SSD 与 RDMA 网络全部带宽的并行文件系统。 按照官方的说法,3FS 专为应对 AI 训练和推理工作负载的挑战而设计,将为 DeepSeek 的数据访问全程加速。它以高吞吐、低延迟和强一致性为 ...