FramePackを追加学習すると、画像・動画の生成時にテキストのプロンプトでは難しい指示を守らせることができます。たとえば、等速で360度回転する、のような指示が可能です。
FramePackのLoRA学習にあたっては、musubi-tunerを使うのが簡単です。とはいえ機械学習なので、どうしても試行錯誤があります。
ですが、設定次第で、「学習途中のLoRAの性能をリアルタイムで確認する」「学習率の変化の影響を可視化する」「学習後に自動でGPUインスタンスを落とす」などの工夫ができます。全て書いたので、参考にしてください！
また、誤りや改善点があれば、記事に取り込みたいのでぜひコメ…
Source link
Views: 0
