作者 | 火山引擎存储团队 2025 年 2 月 28 日,DeepSeek 在其开源周最后一天压轴发布了自研的并行文件系统 Fire-Flyer File System,简称 3FS。该系统支撑了 DeepSeek V3&R1 模型训练、推理的全流程,在数据预处理、数据集加载、CheckPoint、KVCache 等场景发挥了重要作用。
2 月 28 日,DeepSeek 开源周第五日迎来了 Fire-Flyer File System (3FS):一套基于现代 SSD 与 RDMA 网络全部带宽的并行文件系统。 按照官方的说法,3FS 专为应对 AI 训练和推理工作负载的挑战而设计,将为 DeepSeek 的数据访问全程加速。它以高吞吐、低延迟和强一致性为 ...
DeepSeek开源周的最后一天,居然提到了一个叫3FS(Fire-Flyer File System)的高性能分布式文件存储系统,这是一个用于分布式计算的并行文件系统,是为AI训练和推理准备的。 3FS充分了利用现代化的NVMe SSD和RDMA(一个绕过CPU和系统的高效内存访问技术)网络的带宽 ...
最后一天,DeepSeek开源了全生命周期数据访问引擎Fire-Flyer File System(3FS),以及基于3FS的数据处理框架Smallpond。 全面支持V3/R1 ...
在算力需求爆炸的AI时代,DeepSeek开源推出的高性能分布式文件系统3FS(Fire-Flyer File System),以单机SSD性能极限挖掘与RDMA网络零拷贝传输为核心,重新定义了AI训练场景的高性能存储标准。 3FS有许多亮点,例如元数据设计、针对基于USRBIO的FUSE客户端、异步零拷贝 ...
在不舍与兴奋中,我们迎来了DeepSeek开源周第五天。今天DeepSeek开源的项目是:Fire-Flyer文件系统,即3FS。 据了解,3FS是一个高性能并行文件系统,它是所有Deepseek数据访问的助推器,能应对AI训练和推理工作负载的挑战。 它利用现代SSD和RDMA网络提供共享存储层 ...
一些您可能无法访问的结果已被隐去。
显示无法访问的结果