当前位置: 首页 » 资讯 » 新科技 » 正文

DeepSeek开源周第五天:“动力推进器”Fire-Flyer文件系统

IP属地 北京 编辑:冯璃月 砍柴网 时间:2025-02-28 11:35:35

2月28日,DeepSeek“开源周”第五天,今天开源的是一款为所有DeepSeek数据访问提供动力的推进器,名为3FS。

Fire-Flyer文件系统(3FS)——一个并行文件系统,充分利用现代SSD和RDMA网络的带宽。180节点集群中,聚合读取吞吐量达6.6 TiB/s;25节点集群中,GraySort基准测试吞吐量达3.66 TiB/min。

单客户端节点的KVCache查找峰值吞吐量超过40 GiB/s;采用强一致性语义的分离式架构;支持V3/R1中的训练数据预处理、数据集加载、检查点保存/重载、嵌入向量搜索及推理中的KVCache查找。

DeepSeek表示,3FS旨在为DeepSeek的数据密集型任务提供高效、可靠的存储与访问解决方案,助力AI研究与开发。

免责声明:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其内容真实性、完整性不作任何保证或承诺。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。

全站最新