ホームページ >テクノロジー周辺機器 >AI >Deepseekオープンソース週5日:「パワースラスター」火災フライヤーファイルシステム
Deepseekオープンソースプロジェクトは別の武器を追加します!今日、DeepSeekデータアクセスを可能にするために、新しい並列ファイルシステム3FSがリリースされました。
3FS(Fire-Flyer File System)は、最新のSSDおよびRDMAネットワークの高い帯域幅を最大限に活用して、180ノードクラスターで最大6.6 TiB/sのスループットを読み取り、25ノードクラスターのGraySortベンチマークテストで3.66 TIB/MINのスループットを達成します。 KVCacheのピークスループットは、単一のクライアントノードを検索します。
このシステムは、個別のアーキテクチャを採用し、強力な一貫性セマンティクスをサポートし、トレーニングデータの前処理、データセットの読み込み、チェックポイントの保存/オーバーロード、埋め込みベクトル検索、およびV3/R1の推論でのKVCache検索を効果的にサポートできます。
DeepSeekチームは、3FSがデータ集約型のタスクに効率的で信頼できるストレージおよびアクセスソリューションを提供し、それによってAIの研究開発プロセスを加速することを目指していると述べました。
以上がDeepseekオープンソース週5日:「パワースラスター」火災フライヤーファイルシステムの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。