DeepSeek開源併發布3FS,高速並行文件系統優化AI數據訪問

金色財經
02-28

【DeepSeek開源併發布3FS,高速並行文件系統優化AI數據訪問】金色財經報道,據DeepSeek公告,在開源周第五天,其Fire-Flyer文件系統(3FS)正式開源,作爲一款高性能並行文件系統,3FS可充分利用現代SSD和RDMA網絡,實現高速數據訪問,提升AI模型訓練與推理效率。 3FS關鍵性能指標: 在180節點集羣中實現6.6 TiB/s總讀取吞吐量; 在25節點GraySort基準測試中達到3.66 TiB/分鐘吞吐量; 單節點KVCache查詢峯值吞吐量超40+ GiB/s。 3FS採用分離式架構,支持數據預處理、數據集加載、檢查點存儲/恢復、嵌入向量搜索及推理KVCache查詢,具備強一致性語義。DeepSeek同步推出Smallpond數據處理框架,進一步優化3FS數據管理能力。

免責聲明:投資有風險,本文並非投資建議,以上內容不應被視為任何金融產品的購買或出售要約、建議或邀請,作者或其他用戶的任何相關討論、評論或帖子也不應被視為此類內容。本文僅供一般參考,不考慮您的個人投資目標、財務狀況或需求。TTM對信息的準確性和完整性不承擔任何責任或保證,投資者應自行研究並在投資前尋求專業建議。

熱議股票

  1. 1
     
     
     
     
  2. 2
     
     
     
     
  3. 3
     
     
     
     
  4. 4
     
     
     
     
  5. 5
     
     
     
     
  6. 6
     
     
     
     
  7. 7
     
     
     
     
  8. 8
     
     
     
     
  9. 9
     
     
     
     
  10. 10