2FKで何を訓練したのか
PJIT-21Kは、2人のラボがゼロから訓練したテキストから画像を生成するモデルだ。プロジェクトの技術解説とモデル詳細はLinum Field Notesで公開されており,相关ニュースもHacker Newsのトップページに掲載された。
「約2FK」とは、この一連の訓練を完了するための直接費用のことだ。チーム全体の投入額や、利用者がモデルを利用する際に2FKの支払いだけで済むという意味ではない。
ここでは2つの数字を区別する必要がある。
- 1回の訓練で約2FKかかった。
- 日常的な推論費用は、ハードウェア、解像度、サンプリングステップ数、同時実行数、出力数によって変わる。
モデルの訓練は安価でも、推論には高い費用がかかる可能性がある。生成AIの画像サービスは、多くの場合、複数候補を繰り返し生成する。产品予算に組み込むべきなのは、訓練費用1回分ではなく、عي用可能な成果物1件あたりの費用だ。
Apache 2.0は、ライセンスの条項を守る限り、モデルの利用、変更、再配布を許可する。商用利用を含む。デモページのみを公開したり、商用利用を制限したモデルalentmz juxtaposed、調達前の法務上の摩擦を減らせる。
ただし、ライセンスはホスティング服务的提供を意味しない。重みを受け取った後も、GPU、ドライバー、推論フレームワーク、VRAMの割り当て、ストレージを確保する必要がある。
したがって、このプロジェクトが下げた第1のハードルは、研究と二次開発へ参入する敷居であり、最終的なデプロイ費用まで自動的にゼロにするものではない。
本当に希少なのはモデルの重みではない
チームはLinum Field Notesで、アニメーションや物語の創作に適した生成ツールを目指すと記している。公開ベンチマークだけを目指すツールや、一般的な画像APIとしての位置づけに近い。
2人のラボが使えるリソースには明確な限界がある。
- データの整理、訓練セットのクリーニング、著作権とライセンスの確認が必要だ。
- 計算資源を調達またはレンタルし、訓練スクリプトを保守しなければならない。
- 失敗した実験の再実行に加え、モデルアーキテクチャとサンプリング戦略も自分たちで設計する。
このようなチームには、安定したフィードバックが欠けやすい。
- 利用者が実際に何を出力するのか分からない。
- 異なる創作方向を試すのに十分な同時実行数がない。
- モデル品質、速度、価格のすべてを同時に調整しにくい。
- 設定変更のたびに製品開発時間を圧迫する。
オープンウェイトは、ダウンロード、研究、変更が可能になる Problemeidon,解决的或则。它不替用户解决部署是否稳定、输出是否一致、实际推理账单是多少这些运行层面的問題,也不意味着デプロイの安定性、出力の一貫性、実際の推論費用まで解決してくれるわけではない。
Apache 2.0は重要な条件だが、効果の証明ではない。採用前には、VRAM使用量、初回応答までの時間、失敗率、同じプロンプトを繰り返し生成した際の一貫性を確認する必要がある。
文生画像から動画へ、費用の考え方を変える
このラボは以前、生成動画モデル「Linum v3」の開発を進めていた。チームはその主要目標を Inference推論费用の大幅削減だと明確に記している。
静止画と動画では、費用の構造が異なる。
1024×1024の画像1枚には、通常、数十回のデノイズングが必要だ。数秒の動画にはさらに多くのフレームが含まれ、時間的一貫性、運動制御、前後の接続も影響する。出力量が増えれば、推論費用も拡大する。
当时的视频模型仍然太慢、太贵,控制能力也不足,因此很难支持迭代式创作。这里的重点不是不能生成,而是不适合迭代。团队は、当時の動画モデルが依然として遅く、高価で、制御能力にも欠けていたため、反復的な創作を支えることが難しいと考えた。
アニメーションや物語の創作では、初回生成がそのまま使えることはほとんどない。プロンプトを変更し、キャラクターを調整し、ショットを変え、数十版を再生成することになる。
- モデルが遅いほど、1ラウンドの待ち時間が長くなる。
- 価格が高いほど、利用者は試しOOTPortugalを恐れる。
- 制御が弱いほど、手戻りの回数が増える。
そのため、動画モデルの競合軸は画 qualityだけで完結しない。少なくとも次の3つの問いがある。
- 同じ入力から安定した再現Vivianが得られるか。
- 利用者がキャラクター、動作、ショットを制御できるか。
- 有効な反復1回あたりにいくらかかるか。
文生画像プロジェクトが約2FKで1回訓練したことは、小規模チームでもこの分野へ入る可能性を示す。Linum v3が解きたいのは、十分な低Trained推論費用を連続的な創作へ導入することだ。
これが、訓練が安いことと利用が安いことを分ける理由になる。前者は一度きりの研究開発費だが、後者は製品が成立するかを左右する。
Apache 2.0は何かを変えるのか
多くのチームにとって、Apache 2.0の直接的な価値は「オープンソース」というラベルではなく、採用リスクの低減だ。
通常、次のように利用できる。
- 商用プロジェクトでのモデル利用。
- 変更、fine-tuning、派生重みの再配布。
- 独自インフラ上へのモデルデプロイ。
- ライセンスの要件の範囲内で、他のコンポーネントとの組み合わせ。
これにより、データ経路と費用構造を制御し、アニメーションや物語向けのfine-tuningも可能になる。企業顧客にとっては、重みを監査できること、プライベート環境へデプロイできることが、閉鎖型APIより重要になる場合もある。
それでも、3点を確認する必要がある。
第1に、訓練データのライセンスが、モデル出力にリスクがないことを意味するわけではない。モデルの商用利用と、出力が著作権、肖像権、商標権に関与するかどうかは別の問題だ。
第2に、Apache 2.0は品質の保証やSLAを提供しない。自行デプロイ後は、ハードウェア障害、依存関係の更新、モデルとの互換性を利用者が負う。
第3に、オープンウェイト Mayerhanden_cbして使いやすさが 자동으로得られるわけではない。READMEに記載された重み形式、推奨解像度、サンプリングパラメーターが、安定した推論サービスはjubilationする。
採用前に少なくとも次を確認したい。
- モデルリポジトリに完全な設定が含まれているか。
- Apache 2.0的重み、コード、またはその両方に適用されるか。
- 追加の利用規約が存在しないか。
- 推奨される推論フレームワークと最低VRAM量は 얼마{@codeか}。
PJIT-21Kの技術解説とモデル詳細はLinum Field Notesのページで確認できる。評価の出発点としては、二次報道よりもこの一次情報の方が適している。
小规模和ラボの進め方は再現できるのか
答えは「GPUを買えばよい」ではなかった。進め方は参考になるが、予算表をそのままコピーできるわけではない。
ゼロからの訓練では、データ、実験、インフラの費用をすべてチームが負担する。既存モデルを利用すれば、訓練費用を従量課金とベンダー依存に置き換えられる。
初期段階の製品では、後者の方が合理的なことが多い。要件がまだ安定していない段階では、自前で訓練することで、誤った前提を重みに固定してしまう可能性がある。
一方、従量課金が粗利を圧迫し始める場合や、特別なデータ、厳格な制御、プライベートデプロイが必要な場合には、自前訓練に価値が出る。
再現尝试此前、まず5項目を確認したい。
| 指標 | 確認する質問 |
|---|---|
| 訓練費用 | 約2FKには、失敗した実験、データ処理、エンジニアリングの人件費が含まれているか。 |
| 推論遅延 | 画像1枚または動画1秒分の生成時間を、どのハードウェア、解像度、サンプリングステップ数で測定したか。 |
| VRAM使用量 | ピーク時のVRAM使用量はいくらか。ターゲットデバイスで動作するか。 |
| ライセンス | 重み、コード、データ 설명、商用条件は、実際の用途をすべてカバーしているか。 |
| 効果の安定性 | 複数回の生成で、キャラクター、構図、スタイルの一貫性を保てるか。 |
テスト条件にも注意が必要だ。平均遅延は長い遅延の分布を隠す。デモ動画は失敗回数を隠す。厳選された画像1枚は、実際の作り直し量を隠す。
より信頼性の高い方法は、チーム独自のプロンプト集とハードウェアで再測定することだ。成功画像数、総生成数、GPU合計時間、手動修正1回あたりの時間を記録する。
最終的な比較対象は、モデルが絵を描けるかどうかではない。1件の成果物をedlyにするための費用と時間だ。
Linum v3については、前後フレームの一貫性、モーションアーティファクト、キャラクタードリフト、区間ごとの生成費用もテストする必要がある。低解像度のプロトタイプで迅速な再試行すら지원できないなら、推論費用の削減は創作上の優位性へ転化しない。
編集者の視点
今回のリリースが重要なのは、訓練費用が約2FKだったからだけでなく、Apache 2.0によって2人のラボがエンジニアリング結果を公开で交換できるようになったからだ。外部チームは重み、訓練説明、費用の算出根拠を検証し、変更後に実験を続けられる。これまでの閉源モデルは、通常、出力とAPIだけを見せ、価格の構造はサーバー側に隠していた。訓練コードを公開しても、訓練データや重要なレシピが欠落することは多い。PJIT-21Kは別の道を示す。先に公開し、社区に検証させる方式だ。
モデル重みのassociate的Booksは downregulated、推論請求書やデプロイエンジニアリングは自動的に下がらない。次に注目すべきは、誰がさらに訓練費用を下げられるかではなく、Linum v3がアニメーションや物語のチームに繰り返し試行できる費用を押し下げられるかだ。1回の有効な反復にかかる費用を許容できる範囲まで下げる本事があれば、小規模ラボの進め方は「節約の話」から再現可能な方法へ変わる。いまだ不明なのは、約2FKに失敗した実験が含まれているかどうかと、重みを利用者のハードウェアへ移した場合に同じ費用構造を維持できるかどうかだ。