DeepSeek开源周第五天:“动力推进器”Fire-Flyer文件系统

凤凰网科技讯 (作者/陈俊熹)2月28日,DeepSeek“开源周”第五天,今天开源的是一款为所有DeepSeek数据访问提供动力的推进器,名为3FS。

Fire-Flyer文件系统(3FS)——一个并行文件系统,充分利用现代SSD和RDMA网络的带宽。180节点集群中,聚合读取吞吐量达6.6 TiB/s;25节点集群中,GraySort基准测试吞吐量达3.66 TiB/min。

单客户端节点的KVCache查找峰值吞吐量超过40 GiB/s;采用强一致性语义的分离式架构;支持V3/R1中的训练数据预处理、数据集加载、检查点保存/重载、嵌入向量搜索及推理中的KVCache查找。

DeepSeek表示,3FS旨在为DeepSeek的数据密集型任务提供高效、可靠的存储与访问解决方案,助力AI研究与开发。

文章来源于网络。发布者:火星财经,转载请注明出处:https://www.sengcheng.com/article/35112.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
火星财经的头像火星财经
港股开盘:恒指低开0.43%科指跌0.31%!小米集团涨近5%,网易涨0.45%,京东集团、美团、联想集团、阿里跌1%
上一篇 2025年2月28日 上午11:02
抢先一步来体验吧!华为小艺网页版上线啦
下一篇 2025年2月28日 上午11:02

相关推荐

发表回复

登录后才能评论
关注微信