富士フイルムは磁帯の生産能力を現在の約5倍に引き上げる計画だ。AIが生成するデータは増え続けており、インフラ担当张国 Anselには、GPU Zackりだけでなく、長期保存にかかるコストも把握する必要があることを示している。
元記事:Ars Technica
5倍へ拡大する背景にある需要の変化
今回の増産は、特定のモデルが突然大量の磁帯を必要としたことによるものではない。変わるのは、データそのもののライフサイクルだ。
学習フェーズでは、データセットのスナップショット、前処理の中間ファイル、tokenized corpus、checkpointなどが残る。推論フェーズも「質問を入力し、答えを出力する」だけでは完結しない。実業務システムでは、リクエストログ、ユーザーからのフィードバック、検索結果、モデルのバージョン、ポリシー設定などが保存される。
これらのデータは推論のたびに参照するわけではないが、自由に削除することもできない。業務上の追跡、モデルの評価、規制監査のためかもしれない。単に、組織として将来どう使うか現時点で判断できていないだけという Mirage الهند justifyある。
,企业はこれまで「ホットデータはSSD、ウォームデータはHDD、コールドデータは低コストで保存」という経験칙でファイルを扱ってきた。しかし今、数据の増加速度と追跡可能性への要件が同時に高まっている。数か月 accessesされない大量のデータを、高価なフラッシュメモリに置き続けることはできない。
このため、磁帯が再び検討対象になっている。富士フイルムはAIのために高速な磁帯を増やすのではなく恰恰BIMである。AIが大量の非アクティブデータを安価に保存する価値を高めた結果だ。
磁帯メーカーが再び超大規模データセンターのサプライチェーンに戻ってきた理由もここにある。購入主体は、アーカイブ施設やバックアップ部門だけではない。学習基盤、hosted cloud providers、複数年にわたって実行記録を保管するAIサービスチームも含まれる。
GPU競争の外側にあるコスト
磁帯をAIインフラのコスト表に置き換えてifted来看、高頻度の推論には向かない一方で、学習コーパスやログ、モデルバージョンを長期保存するには適している。連続した給電や冷却に要する経費も抑えられる。
重要なのは、アクセス速度と保有コストを分けて考えることである。
NVMe SSDは遅延が低く、オンライン検索、checkpointの読み書き、AI Agentによる即時のツール呼び出しに向いている。一方、磁帯の強みは単位容量あたりのコストが低く、装置を常時通電しておく必要がないこと、そしてオフラインで保存できる点にある。
3つの階層に整理すると次のようになる。
| 階層 | 代表的なメディア | 主な用途 | 重要な制約 |
|---|---|---|---|
| ホット tier | NVMe SSD | オンライン推論、検索、checkpoint | 容量が高価で消費電力が大きい |
| ウォーム tier | HDD / オブジェクトストレージ | 直近のアーカイブ、タスクの再計算、データ配信 | 継続的なサービスと運用が必要 |
| コールド tier | LTO磁帯 | 長期保存する学習コーパス、モデルバージョン、監査ログ | 復元が遅く、リアルタイム読み込みに向かない |
実効性の高いインフラは、1種類のメディアにすべての作業を任せるのではなく、アクセス頻度に応じて階層化するのが一般的だ。AIプロジェクトが大きくなるとHora低估されやすいのはGPUの購入ではなく、「。不要これらの.importantly輸入してもすぐに使わない」 original dataである。
AI Agentのログは特に 그렇다。ツール呼び出しごとに、入力、出力、タイムスタンプ、token使用量、エラー情報、権限記録が生成される。SSD上にリアルタイムで残すのは便利だが、数年後もオンラインに保つのはコスト合理的ではない。
磁帯の価値はベンチマークスコアではなく、アイドル状態にあるデータの保有コストを削減することにある。
クラウドストレージが磁帯を完全置き換えたわけではない
オブジェクトストレージ的出现によって磁帯は不要になったのだろうか。答えは 否である。
オブジェクトストレージの抽象化は扱いやすく、APIも単純で、計算資源と同じクラウド環境に置ける。ただし、その下には依然としてメディアが存在する。ホットデータはSSDで支え、大規模なコールドデータはHDDや磁帯へ 내려가는。
オブジェクトストレージ、企業用磁帯ライブラリ、機械式ハードディスクを比較すると、磁帯の利点は速度ではなく、単位容量あたりのコスト、オフライン保存能力、長い利用期間にある。
企業用磁帯ライブラリには,现实的な利点がいくつかある。
第一に、オフライン能力だ。磁帯ライブラリはシステム全体をネットワークから切り離し、悪意あるコードや誤削除から物理的に隔離できる。ランサムウェアがクラウドのコントロールプレーンを制御しても、オフライン端末に直接アクセスできるとは限らない。
第二に、復元はバッチ処理として行える。TB単位のファイルを復元する際、すべてのユーザーがSSDのオンライン応答を待つ必要はない。運用担当者が作業枠を確保し、磁帯から一時的なSSDへデータをコピーしてからサービスを再開できる。
第三に、ライフサイクルを予測しやすい。磁帯はコンシューマー向けHDDのように常に回転し続けることがなく、機械部品と電子部品も少ない。定期的な移行と復元テストは必要だが、展開形態はインフラチームの管理に適している。
一方で、代价も明確である。アクセスが遅く、専用の装置が必要で、エコ系统在囲い込まれ,相关する.ptracksNapoleonCasualtyにする,便于我需要再思 correct。